cherche aide pour la fonction awk sous linux Résolu/Fermé

Question

Bonjour,
j'ai des données à recuperer avec la fonction awk sous linux et je voudrais savoir comment faire pour extraire les données que je veux a partir des pages html que j'ai dans un fichier sur mon bureau.
merci pour celui qui veux m'aider.

jipicy · Answer

Bonjour,

De la bonne manière de poser les questions (Ou comment poser les questions de manière intelligente)*

;-))

* Merci [Dal]

abdali · Answer

merci

jipicy · Answer

De rien ;-))

Mais avoue :

comment faire pour extraire les données que je veux a partir des pages html que j'ai dans un fichier
Lesquelles ? 
Elles ressemblent à quoi ?
Elles sont situées où ?
Quel est le délimiteur ?
Combien de champs ?
etc.awk '/motif/ { print $1, $2, $3 }' fichierT'es plus avancé avec ça ?

abdali · Answer

tout d'abord merci pour ta reponse,
 je dois te dire que je suis un novice et que je suis un peu dérouté car je ne suis pas un informaticien donc je ne m'y connais pas trop.
pour le problème que j'ai voila:
j'ai des données des présidentielles 2007 en France que j'ai récupéré du site du ministère de l'intérieur sous format html avec la fonction wget et maintenant je voudrais savoir comment utiliser la fonction awk pour prendre que les données des candidats avec leur score au deuxième tour.il faudrait que je prenne les noms des candidats avec leur score, et ce travail est valable pour tout les départements de France.
voila si vous pouvez me donner un coup de main ça serait bien.
merci

abdali · Answer

voici le lien
 https://www.cjoint.com/?cmnoBpJozR
je voudrais avoir juste les données des candidats c'est à dire le nom des candidats et les voix 
merci encore

jipicy · Answer

C'est pas du "awk" c'est du "sed" (je suis plus à l'aise avec ;-)) ) :sed -n '/M\.\|Mme/{N;s#<[^>]*>##g;s/[ ]\{2,\}//g;s/
/ : /p}' 053.html;-))

abdali · Answer

comment je fais pour afficher les resultats?
quand j'utilise la commande que tu m'as donné j'ai une autre ligne qui s'affiche sans que rien ne se passe.
je comprend pas. j'ai mi un fichier test pour tester sur une seule page que j'ai nommé 22001.html et qui contient les données puis j'ai utilisé le programme avec a la fin le nom de ce fichier mais sur la console ça revient a la ligne.
peux tu encore m'aider?

jipicy · Answer

Récupère le fichier que tu m'as mis en lien via "wget", puis sur ce même fichier exécute la commande ci-dessus, il devrait alors te sortir ce résultat ;-))

abdali · Answer

ya un messsage qui me dit "sed: impossible de lire 053.html :aucun repertoire ou fichier de ce type.
pourtant j'ai mis le fichier 053 avec la page 22001.html

jipicy · Answer

Affiche le contenu de ton répertoire et la commande que tu tapes, ainsi que le message d'erreur. Fais un copier/coller de tout ça depuis ton terminal...

abdali · Answer

/home/dali/053/022/22001.html
et voila ce que je tape
dali@k-mna-091:~/0053$ sed -n '/M\.\|Mme/{N;s#<[^>]*>##g;s/[ ]\{2,\}//g;s/
/ : /p}' 053.html

abdali · Answer

et quan j'essai avec cette commande :

dali@k-mna-091:~$ sed -n '/M\.\|Mme/{N;s#<[^>]*>##g;s/[ ]\{2,\}//g;s/
/ : /p}' 22001.html

 voila ce qui s'affiche:

dali@k-mna-091:~$

abdali · Answer

pardon si je n'explique pas bien car je viens de connaître ubuntu depuis une semaine

jipicy · Answer

Le fichier "22001.html" c'est le fichier récupérer via "wget" ?

Affiche le résultat de la commande :file 22001.html

abdali · Answer

le répertoire 053 que j'ai, comporte quatre sous répertoires qui contiennent  les pages html des données aspirées du site web ils représentent en fait les résultats des 4 départements de Bretagne

abdali · Answer

oui c'est le fichier récuperer via wget

abdali · Answer

dali@k-mna-091:~$ file 22001.html
22001.html: ISO-8859 HTML document text, with very long lines

jipicy · Answer

Dis-moi si cette commande t'affiche la liste des candidats et leur score en dessous :sed -n '/M\.\|Mme/{N;s#<[^>]*>##gp}' 22001.htmlSi oui, dis-moi si à la suite de cette commande :sed -n '/M\.\|Mme/{N;s#<[^>]*>##gp}' 22001.html | cat -A si les lignes finissent par : ^M$ ou $

abdali · Answer

Est ce que c'est possible d'avoir que les noms exemple ( ROYAL , BOV, SARKOZY,....) et puis sur la même ligne le score. je dois faire ça pour tout les communes de France. et merci encore

jipicy · Answer

Bon essaye avec cette commande :sed -n '/M\.\|Mme/{N;s#<[^>]*>##g;s/[ ]\{2,\}//g;s/
/ : /p}' 22001.html Ça devrait aller mieux ;-))

abdali · Answer

comment les mettre dans un fichier texte à partir de la console?simplement en copiant et en collant?

abdali · Answer

une toute derniere question comment généraliser sur tout les autres fichiers que j'ai.
les pages html se trouvent dans un repertoire nommé 022 et 053 .
merci pour tout

jipicy · Answer

Tu veux tous les résultat dans un seul et même fichier de sortie ou chaque page dans un fichier différent ?

abdali · Answer

je ne sais pas comment faire pour que la fonction que tu m'as donné s'applique a toutes les pages que j'ai. car chaque page représente les résultats d'une commune, donc il me faut appliquer cette fonction pour toute les pages , ce que je n'arrive pas a faire en les mettant dans un répertoire quelconque.
merci

jipicy · Answer

sed -ns '/M\.\|Mme/{N;s#<[^>]*>##g;s/[ ]\{2,\}//g;s/ / : /p}' 022/* >> fichier_sortie.txt sed -ns '/M\.\|Mme/{N;s#<[^>]*>##g;s/[ ]\{2,\}//g;s/ / : /p}' 053/* >> fichier_sortie.txt;-))

abdali · Answer

Je te tire un grand chapeau.
tout marche a merveille
mille merci.

jipicy · Answer

De rien ;-))

abdali · Answer

bonjour, encore une fois je voudrais vous demander de l'aide
au fait j'ai un petit souci dans le programme que tu m'as donné.
je voudrais supprimer les noms qui se repetent dans mon exemple c'est segolene royal et nicolas sarkozy qui se repetent a cause des resultats du second tour. et moi je n'ai besoin que des resultats du premier tour.
merci

jipicy · Answer

Rajoute "e '0,/RAPPEL/d' -e" comme suit dans la commande :sed -nse '0,/RAPPEL/d' -e '/M\.\|Mme/{N;s#<[^>]*>##g;s/[ ]\{2,\}//g;s/
/ : /p}' 022/* >> fichier_sortie.txt;-))

abdali · Answer

merci
c'est très gentil.

abdali · Answer

salut,
puisque tu as une idée des données que j'ai pourrait tu me dire comment faire pour créer un tableau croisé ou il y aurait les candidats comme variable et les différents résultats des département comme individus
merci.

Cherche aide pour la fonction awk sous linux

31 réponses

Discussions similaires