comparer 2 champs sur lignes differentesRésolu/Fermé

Question

Bonjour à tous,

Voilà j'ai un fichier à 3 colonnes. Pour les lignes dont le 1er champ est identique je dois faire une comparaison sur le champ 3 et garder une seul ligne (la ligne ayant la date la plus recente). Pour faciliter le travail j'ai d'abord effectuer un sort -n.

Exemple

acs101 linus>cat test
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009
acs101 linus>

le fichier output test1 devra etre

205321505 5 21/06/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 18/07/2009


Merci à tous

mamiemando · Answer

Avec uniq et cut tu peux extraire les clés (première colonne). 
(mando@aldur) (~) $ cat pouet
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009 

(mando@aldur) (~) $ cat pouet | cut -f1 -d' ' | uniq
205321505
202003245
205432152
206434434

Avec un grep tu peux extraire les lignes pour une clé donnée (que je note x dans ce qui suit) à chaque clé ainsi extraite. En appliquant au grep un sort en ne conservant que la dernière ligne avec un tail on obtient le résultat désiré.
(mando@aldur) (~) $ for x in `cat pouet | cut -f1 -d' ' | uniq`; do grep $x pouet | sort | tail -n 1; done
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 18/07/2009 
Version sous forme d'un script (sans doute plus lisible) :
#!/bin/bash
for x in `cat pouet | cut -f1 -d' ' | uniq`;
do
    grep $x pouet | sort | tail -n 1;
done

Pour plus de détails :
man cut
man uniq
man sort
man tai
man grep
Bonne chance

jipicy · Answer

Salut,

A essayer :[tmpfs]$ cat plop
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009

[tmpfs]$ sort -r +0 -1 -k 3.4,3.6 -k 3.1,3.3 plop | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 5 21/06/2009
202003245 2 12/05/2009

[tmpfs]$ ;-))

Édit : Y'a du rififi dans la mise en page comme qui dirait ;-(((
Les sauts de lignes n'existent pas en réalité ;-(

mamiemando · Answer

Ah c'est même mieux que ce que j'ai fait avec ton sort, car je viens de percuter qu'avec juste un sort (comme j'ai fait sur le résultat du grep) on trie en priorité sur la colonne 2 puis sur le jour, puis sur le mois, et enfin sur l'année ce qui ne correspond pas au résultat que papavers souhaite.

En fait je n'avais jamais fait gaffe qu'on pouvait faire tout ça avec sort.

papavers · Answer

Merci à vous Mamiemando et Jipicy.

Comme tu l'as dit Mamiemando on ne recuperait pas forcement la ligne voulue.
Et c'est plus performant en utilisant juste le sort, car avec un tres gros fichier, utiliser grep n'est pas avantageux.

Je teste de suite.

A toute.

papavers · Answer

Salut Jipicy,

En testant ta commande je n'obtiens pas le même résultat,

acs104 linus>cat test.2
205321505 5 21/06/2009

205321505 7 25/05/2009

202003245 2 12/05/2009

205432152 5 14/07/2009

206434434 5 12/07/2009

206434434 5 18/07/2009
acs104 linus>sort -r +0 -1 -k 3.4,3.6 -k 3.1,3.3 test.2 | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 7 25/05/2009   (je devrais avoir 205321505 5 21/06/2009,  plus récente date)
202003245 2 12/05/2009

acs104 linus>

Bon A +

jipicy · Answer

Quel système ? Ou distrib ? Quel shell ?

Parce que chez moi avec un copier:coller de ton fichier "test2" :
[tmpfs]$ cat toto
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009
[tmpfs]$ sort -r +0 -1 -k 3.4,3.6 -k 3.1,3.3 toto | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 5 21/06/2009
202003245 2 12/05/2009
[tmpfs]$?? ;-\

papavers · Answer

Eh ben!

Je suis sous solaris korn shell.

acs104 root#cat /etc/release
                     Solaris 8 HW 7/03 s28s_hw3wos_05a SPARC
           Copyright 2003 Sun Microsystems, Inc.  All Rights Reserved.
                             Assembled 11 June 2003
acs104 root#

jipicy · Answer

Ben là je ne peux plus rien pour toi, n(ayant pas de quoi testé dans un environnement comme le tien.

J'ai trouvé ça, si ça peut t'aider...
http://www.softpanorama.org/Tools/sort.shtml
http://docs.sun.com/app/docs/doc/817-3936/6mjgdbvid?a=view

papavers · Answer

Merci pour les adresses, j'etais déja sur l'une d'elles.

Je vous tiens informé dès que j'ai une amélioration

A +

papavers · Answer

Là j'ai ajouter un autre sort sur l'année ( au cas ou ce serait different). 

En fait sur le dernier sort il prend en compte la valeur de la colonne 2 :

acs104 linus>cat test.3
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009
acs104 linus>

acs104 linus>cat test.2
205321505 7 21/06/2009
205321505 5 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009
acs104 linus>

acs104 linus>sort  -r +0 -1 -k 3.7,3 -k 3.4,3.5 -k 3.1,3.2 test.3 | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
acs104 linus>sort  -r +0 -1 -k 3.7,3 -k 3.4,3.5 -k 3.1,3.2 test.2 | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 7 21/06/2009
202003245 2 12/05/2009
acs104 linus>

jipicy · Answer

Un détail chez moi qui a de l'importance, le numéro du caractère utilisé pour la délimitation...
[tmpfs]$ cat test2
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009

[tmpfs]$ sort -r +0 -1 -k 3.7,3 -k 3.4,3.5 -k 3.1,3.2  test2 | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 7 25/05/2009
202003245 2 12/05/2009

[tmpfs]$ sort -r +0 -1 -k 3.7,3 -k 3.4,3.6 -k 3.1,3.3  test2 | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 5 21/06/2009
202003245 2 12/05/2009

[tmpfs]$  ? ;-\

papavers · Answer

Salut Jipicy,

sous solaris les 2 commandes me donnent le meme resultat.

acs104 linus>cat test.2
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 5 18/07/2009

acs104 linus>sort -r +0 -1 -k 3.7,3 -k 3.4,3.5 -k 3.1,3.2  test.2 | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 7 25/05/2009
202003245 2 12/05/2009

acs104 linus>sort -r +0 -1 -k 3.7,3 -k 3.4,3.6 -k 3.1,3.3  test.2 | sort -ru +0 -1
206434434 5 18/07/2009
205432152 5 14/07/2009
205321505 7 25/05/2009
202003245 2 12/05/2009

Là je vais essayer de voir avec nawk.

Merci encore

papavers · Answer

Bonjour à tous,

Finalement j'ai pu avoir une solution, c'est pas vraiment top mais ça me donne le bon résultat

En fait j'ai remarqué que sous Solaris le contenu du champ 2 influence le dernier sort. J'utilise donc nawk pour changer la position des champs, ensuite j'utilise la commande uniq

acs201 linus>cat test.3
205321505 5 21/06/2009
205321505 7 25/05/2009
202003245 2 12/05/2009
205432152 5 14/07/2009
206434434 5 12/07/2009
206434434 10 18/05/2009
acs201 linus>sort -r +0 -1 -k 3.7,3 -k 3.4,3.6 -k 3.1,3.3 test.3 | nawk '{print($2,$3,$1)}' | uniq -n2 |  nawk '{print($3,$1,$2)}'
206434434 5 12/07/2009
205432152 5 14/07/2009
205321505 5 21/06/2009
202003245 2 12/05/2009
acs201 linus>

Bon si vous avez une meilleure proposition, suis preneur!!!!!!!!!

Comparer 2 champs sur lignes differentes

13 réponses

Discussions similaires

Newsletters