Filtrage JSON avec Python Fermé

Question

Bonjour,

J'essaye, malgré mon peu d'expériences en python, de créer un script simple permettant de faire des appels API sur outils de collecte de données, ne trouvant pas la fonctionnalité que je souhaite dans la documentation.

Les données reçues sont au format JSON, je reçois en fait plusieurs "Observables" correspondants à différentes dates, descriptions, etc.

L'idée est de pouvoir récupérer l'id de chaque Observables, ensuite de faire un second appel API pour ajouter un "tag" approprié. Cet ajout de tag se fait facilement avec l'API.

Mon problème est la lecture du JSON, voici un début de code :

import requests
from requests.structures import CaseInsensitiveDict
import json
import re

url = "https://xxx.xxx.xxx.xxx/attributes/restSearch"

headers = CaseInsensitiveDict()
headers["Authorization"]="xxxxx"
headers["Accept"] = "application/json"
headers["Content-Type"] = "application/json"
data = '{"event_timestamp":"5d"}'

requete = requests.post(url, headers=headers, data=data, verify=False)
reponse = requete.json()

# exemple
obj = '{response: {"Attribute": [{"category": "Network activity"}]}}'

dict = json.loads(obj)

En fait, je reçois un format tel que la variable "obj", avec beaucoup plus de valeurs. J'ai lu qu'il fallait convertir le JSON en Python, cependant avec loads je reçois des erreurs de string car en effet le JSON reçu n'a pas guillemets (donc lorsque je teste loads avec "reponse")

Est-ce qu'il y a une meilleure méthode que celle-ci ?

L'idée ensuite est de parcourir le dictionnaire :

for key in dict:
      
       # et ensuite de récupérer la valeur id pour chaque clés différentes, je ne sais pas si c'est clair
       id = reponse["response"]["Attribute"][0]["event_id"]

mamiemando · Answer

Bonjour,

On ne peut pas reproduire ton problème avec le code partagé (l'URL de l'API est offusquée). S'il s'agit d'une API publique, tu peux l'indiquer et on pourra tester ton script.

Autrement, il faudrait joindre un exemple de json que tu obtiens. S'il est bien formé tu devrais pouvoir utiliser json.loads.

Bonne chance

mamiemando · Answer

Bonjour,

Je ne vois pas trop l'intérêt de transformer ton dictionnaire sous forme de liste, mais pourquoi pas :-)

En tout cas, l'opérateur [] n'a pas le même sens selon que tu l'appliques à une liste ou un dictionnaire :

 pour une liste, il faut passer un entier (entre 0 et la longueur de la liste - 1) qui indique quel élément on prend ;
 pour un dictionnaire, il faut passer la clé (un type hashable, dans ton cas de sont des chaînes de caractères) qui indique quel valeur on récupère.
 sans variable à sa gauche, il permet de créer une liste à la volée (e.g., [1, 2, 3])

Le message d'erreur TypeError: list indices must be integers, not str signifie que tu as passé une chaîne de caractère (au lieu d'un index) à un opérateur [] appliqué à une liste.

Maintenant regardons ce que tu as écrit : ["response"]["Attribute"][i-1] signifie :

 crée une liste contenant la chaîne "response" ;
 récupère dans cette liste l'élément identifié par la clé "Attribute" (ça n'a pas de sens, puisqu'il faudrait passé un index, ici forcément 0 puisque ta liste n'a qu'un élément)
 dans l'objet retourné (que ton code espère de type liste), récupère l'élément i - 1.

Il y beaucoup de choses qui ne vont pas :

 tout d'abord, si je reprends mes notations, tu veux probablement plutôt écrire reponse["response"]["Attribute"][i-1] (et dans ce cas, reponse étant un dictionnaire, la suite à plus de sens)
 ensuite tu veux récupérer l'élément i-1, or dans ta boucle for i in range(nombre_attribut), la première valeur prise par i sera -1 (pour rappel, le premier élément d'une liste est à l'index 0). Le programme marcherait car en python, l'élément -k signifie prend le k-ième élement en partant de la fin, donc ça ferait ce qu'il faut, mais ce n'est sans doute pas ce que tu voulais écrire.

Il serait donc plus naturel d'écrire :

liste = reponse["response"]["Attribute"]
for i in range(len(liste)):
    print(list[i])

... ou plus simplement :

liste = reponse["response"]["Attribute"]
for element in liste:
    print(element)

... ou encore plus simple :

liste = reponse["response"]["Attribute"]
print(liste)

... ou pour plus de lisibilité :

from pprint import pprint

liste = reponse["response"]["Attribute"]
pprint(liste)

Bonne chance

mamiemando · Answer

Bonjour

#7

Si tu écris :

data = '{"id":liste[j],"tag":"Test"}' 

... alors data est une chaîne (ce n'est même pas du JSON à cause de liste[j]) et donc tu perds les bénéfices apportés par une structure python (en l'occurrence un dictionnaire). Donc il faudrait plutôt écrire

data = {"id":liste[j],"tag":"Test"}

... et ensuite rien ne t'empêche de faire :

print(json.dumps(data))

#9

À mon avis tu devrais distinguer dans le nommage data (la structure de donnée python) et la chaîne de caractère JSON qui lui correspond (tu peux l'appeler s_json par exemple).

Bonne chance

Filtrage JSON avec Python

3 réponses

Discussions similaires