Script BASH : récupération variable dans fichier txt

Résolu
gtasplinter Messages postés 16 Statut Membre -  
gtasplinter Messages postés 16 Statut Membre -
Bonjour à tous,

Je suis sous Redhat et j'aimerai faire un script qui me permet de récupérer dans un fichier des variables. le problème est que mon fichier n'est pas formaté de la même façon.
Pour être plus claire, voilà un exemple de la tête de mon fichier : (les éléments que je veux récupérer et stocker sont en gras)

toto.txt :

;*************
; A records
;*************
lplppkokogrgrr 3600 IN A 19.65.12.21
LOkfeokOOkfeooe 3600 IN A 19.66.64.2
;****************
; CNAME records
;****************
mpofk.toto.fr. 3600 IN CNAME 0TuTTfTdTIfIfOdO.toto.fr.
okgor.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
zfplepfkNC.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
;************************************
; Other resource records
;************************************
sepogksepoke.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
OKZOKDZO.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
toto.fr. 600 IN A 19.83.190.2
lpuo 300 IN A 19.83.12.3

Donc en gros, ce que je voudrai faire c'est trouver des commandes qui permettent de récupérer dans 2 variables les infos en gras et les copier dans un nouveau fichier. (A savoir que j'ai plusieurs espace entre les différent champs : variable1 <X espaces> 3600 <X espaces> IN <X espaces> A <X espaces> variable 2)

13 réponses

  1. dubcek Messages postés 18627 Date d'inscription   Statut Contributeur Dernière intervention   5 659
     
    modification pour avoir des tabs en sortie
    $ awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS=FS="\t"} END{for(n in t)print t[n], n, a[n]}' a11
    19.83.12.3	lpuo	
    19.66.64.2	MOkfeokOOkfeooe		okgor	sepogksepoke	OKZOKDZO
    19.65.12.21	lplppkokogrgrr		mpofk
    $
    1
  2. dubcek Messages postés 18627 Date d'inscription   Statut Contributeur Dernière intervention   5 659
     
    $ awk -v OFS='\t' '/IN[ \t]+A/ {t[$NF]=t[$NF] OFS $1} /IN[ \t]+CNAME/ {split($NF, t1, "."); split($1, t2, "."); a[t1[1]]=a[t1[1]] OFS t2[1]} END{for(n in t){split(t[n], t3); print n, t[n], a[t3[1]]}}' test| sort
    19.65.12.21		lplppkokogrgrr	ldap		mpofk
    19.66.64.2		MOkfeokOOkfeooe	RESEAU		okgor	sepogksepoke	OKZOKDZO
    19.83.12.4		lpuo	
    19.84.12.3		toto.fr.	
    19.84.220.2		toto.fr.	
    19.84.92.2		toto.fr.	
    $ 
    $ 
    
    1
  3. zipe31 Messages postés 34620 Date d'inscription   Statut Contributeur Dernière intervention   6 501
     
    Salut,

    $ cat plop 
    ;*************
    ; A records
    ;*************
    lplppkokogrgrr 3600 IN A 19.65.12.21
    LOkfeokOOkfeooe 3600 IN A 19.66.64.2
    ;****************
    ; CNAME records
    ;****************
    mpofk.toto.fr. 3600 IN CNAME 0TuTTfTdTIfIfOdO.toto.fr.
    okgor.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
    zfplepfkNC.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
    ;************************************
    ; Other resource records
    ;************************************
    sepogksepoke.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
    OKZOKDZO.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
    toto.fr. 600 IN A 19.83.190.2
    lpuo 300 IN A 19.83.12.3
    
    $ awk '/IN CNAME/ || /IN A/ { print $1,$NF }' plop 
    lplppkokogrgrr 19.65.12.21
    LOkfeokOOkfeooe 19.66.64.2
    mpofk.toto.fr. 0TuTTfTdTIfIfOdO.toto.fr.
    okgor.toto.fr. MUMUMUMUPKIOKIU.toto.fr.
    zfplepfkNC.toto.fr. MUMUMUMUPKIOKIU.toto.fr.
    sepogksepoke.toto.fr. plppkokogrgrr.toto.fr.
    OKZOKDZO.toto.fr. plppkokogrgrr.toto.fr.
    toto.fr. 19.83.190.2
    lpuo 19.83.12.3
    
    $

    0
  4. dubcek Messages postés 18627 Date d'inscription   Statut Contributeur Dernière intervention   5 659
     
    hello
    faut-il quand même passer par des variables ?
    awk '/^[^;]/ {print $1, $NF}' fichier > nouveau_fichier
    0
  5. Vous n’avez pas trouvé la réponse que vous recherchez ?

    Posez votre question
  6. gtasplinter Messages postés 16 Statut Membre
     
    OK merci :)

    Il reste bien les infos dont j'ai besoin (il faut retirer le nom de domaine toto.fr mais un simple "sed " devrait faire l'affaire). Par contre, j'ai besoin de les mettre en variable. Enfin c'est l'idée que j'avais, car j'ai besoin de récupérer les infos pour pouvoir faire un affichage comme dans /etc/hosts

    Avec donc :

    @IP Host CNAME

    (pour CNAME il fait vérifier la derniere variable et la rajouter derriere cette derniere si elle est présente)

    Exemple :

    toto.txt

    lplppkokogrgrr 3600 IN A 19.65.12.21
    ;****************
    ; CNAME records
    ;****************
    mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.

    fichier de sortie :

    19.65.12.21 lplppkokogrgrr mpofk

    etc......
    0
  7. dubcek Messages postés 18627 Date d'inscription   Statut Contributeur Dernière intervention   5 659
     
    essayer
    $ cat a1
    lplppkokogrgrr 3600 IN A 19.65.12.21
    ;****************
    ; CNAME records
    ;****************
    mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
    $ awk '/IN A/ {t[$1]=$NF} /IN CNAME/ {x=$0; FS="[. ]*"; $0=x; print t[$(NF-3)], $(NF-3), $1}' a1
    19.65.12.21 lplppkokogrgrr mpofk
    $ 
    0
  8. gtasplinter Messages postés 16 Statut Membre
     
    j'ai essayé avec :

    p]# cat test.txt
    ;*************
    ; A records
    ;*************
    lplppkokogrgrr 3600 IN A 19.65.12.21
    MOkfeokOOkfeooe 3600 IN A 19.66.64.2
    ;****************
    ; CNAME records
    ;****************
    mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
    okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
    ;************************************
    ; Other resource records
    ;************************************
    sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    lpuo 300 IN A 19.83.12.3

    ]# awk '/IN A/ {t[$1]=$NF} /IN CNAME/ {x=$0; FS="[. ]*"; $0=x; print t[$(NF-3)], $(NF-3), $1}' test.txt > ResultatT.txt

    ]# cat ResultatT.txt
    19.65.12.21 lplppkokogrgrr mpofk
    19.66.64.2 MOkfeokOOkfeooe okgor
    19.66.64.2 MOkfeokOOkfeooe sepogksepoke
    19.66.64.2 MOkfeokOOkfeooe OKZOKDZO

    C'est pas exactement ce que je voudrai :
    (il faudrai qu'il n'y ai qu'une seula dresse IP identique par ligne et donc que les nom se rajoute sur le meme ligne)
    19.65.12.21 avec une tabulation lplppkokogrgrr mpofk
    19.66.64.2 avec une tabulation MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO
    19.83.12.3 avec une tabulation lpuo

    Et sinon j'ai essayer la même chose avec comme mais avec un fichier qui contient des tabulation entre chaque champ. voir exemple sur les 2 première ligne, idem sur toutes les autres. (Avec la meme commande awk ça ne marche pas)

    # cat test.txt
    ;*************
    ; A records
    ;*************
    lplppkokogrgrr avec une tabulation 3600 avec une tabulationIN avec une tabulation A avec une tabulation19.65.12.21
    MOkfeokOOkfeooe avec une tabulation3600 avec une tabulationIN avec une tabulationA avec une tabulation19.66.64.2
    ;****************
    ; CNAME records
    ;****************
    mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
    okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
    ;************************************
    ; Other resource records
    ;************************************
    sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    lpuo 300 IN A 19.83.12.3

    DSL, mais je ne maîtrise pas beaucoup la commande awk.
    0
  9. dubcek Messages postés 18627 Date d'inscription   Statut Contributeur Dernière intervention   5 659
     
    avec des tabs comme séparateurs
    $ awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; FS="\t"} END{for(n in t)print t[n], n, a[n]}' test.txt 
    19.83.12.3 lpuo  
    19.66.64.2 MOkfeokOOkfeooe  okgor sepogksepoke OKZOKDZO 
    19.65.12.21 lplppkokogrgrr  mpofk 
    $ 
    
    0
  10. gtasplinter
     
    Merci encore de m'aider,

    j'ai essayé la commande suivante :

    ]# awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS=FS="\t"} END{for(n in t)print t[n], n, a[n]}' Test > Resultat.txt

    Le problème est que je me retrouve avec un fichier vide en sortie :(

    Test.txt :

    ]# cat Test.txt
    ;*************
    ; A records
    ;*************
    lplppkokogrgrr 3600 IN A 19.65.12.21
    MOkfeokOOkfeooe 3600 IN A 19.66.64.2
    ;****************
    ; CNAME records
    ;****************
    mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
    okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
    ;************************************
    ; Other resource records
    ;************************************
    sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    lpuo 300 IN A 19.83.12.3
    0
    1. zipe31 Messages postés 34620 Date d'inscription   Statut Contributeur Dernière intervention   6 501
       
      Salut,

      A tout hasard... dans ta commande ton fichier s'appelle "Test" (sans extension) alors qu'apparemment ton fichier s'appelle "Test.txt" (avec une extension), ne serait-ce pas là le problème ?
      0
    2. gtasplinter
       
      non, j'ai modifier le nom de mon fichier d'origine avant de poster mon message mais j'ai oublier de rajouter l'extension. Mais le problème ne viens pas de là.

      j'ai donc bien mon fichier : Test.txt (avec les infos ci-dessus) et la commande :
      awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS=FS="\t"} END{for(n in t)print t[n], n, a[n]}' Test.txt > Resultat.txt

      Resultat.txt => vide
      0
    3. dubcek Messages postés 18627 Date d'inscription   Statut Contributeur Dernière intervention   5 659
       
      dans le fichier Test.txt, les champs sont bien séparés par des tabs ?
      plppkokogrgrrtab3600tabINtabAtab19.65.12.21 
      0
    4. zipe31 Messages postés 34620 Date d'inscription   Statut Contributeur Dernière intervention   6 501
       
      dans le fichier Test.txt, les champs sont bien séparés par des tabs ?
      Bingo ;-))
      0
    5. gtasplinter
       
      héhé, bien vu. Effectivement avec des tabulation ça marche mieux.

      j'avais plppkokogrgrrespacetab3600espacetabINespacetabAespacetab19.65.12.21

      Je vais encore vous embêter. Quelle serait la commande à faire si mes tabulations étaient remplacées par X espaces ?
      0
  11. gtasplinter Messages postés 16 Statut Membre
     
    Bonjour, j'aurai une dernière question. Après quelque test j'ai remarqué un problème.

    Dans le cas ou mon fichier d'origine est :

    [root@099-lab-scm1 TestVitalQIP]# cat Test
    ;*************
    ; A records
    ;*************
    lplppkokogrgrr 3600 IN A 19.65.12.21
    MOkfeokOOkfeooe 3600 IN A 19.66.64.2
    ;****************
    ; CNAME records
    ;****************
    mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
    okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
    ;************************************
    ; Other resource records
    ;************************************
    sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
    lpuo 300 IN A 19.83.12.4
    toto.fr. 600 IN A 19.84.220.2
    toto.fr. 600 IN A 19.84.92.2
    toto.fr. 600 IN A 19.84.12.3
    ldap 300 IN A 19.65.12.21
    RESEAU 3600 IN A 19.66.64.2

    Après la commande j'ai :

    [root@099-lab-scm1 TestVitalQIP]# awk '/IN A/ {t[$1]=$NF} /IN CNAME/ {x=$0; FS="[.\t ]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS="\t"; FS="[ \t]*"} END{for(n in t)print t[n], n, a[n]}' Test | sort
    19.65.12.21 ldap
    19.65.12.21 lplppkokogrgrr mpofk
    19.66.64.2 MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO
    19.66.64.2 RESEAU
    19.83.12.4 lpuo
    19.84.12.3 toto.fr.

    Il me manque :
    19.84.220.2 toto.fr.
    19.84.92.2 toto.fr.

    Et je voudrai que mon nom "RESEAU" se rajouter a la ligne 19.66.64.2 idem pour ldap en 19.65.12.21 et ainsi de suite...
    0
  12. dubcek Messages postés 18627 Date d'inscription   Statut Contributeur Dernière intervention   5 659
     
    effectivement, en utilisant le nom comme index, plusieurs fois le même nom posait un problème, essayer
    $ awk '/IN[ \t]+A/ {t[$1, $NF]=$NF} /IN[ \t]+CNAME/ {x=$0; FS="[. \t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS="\t"; FS="[ \t]*"} END{for(n in t){split(n, b, SUBSEP); print t[n], b[1], a[b[1]]}}'  test | sort
    19.65.12.21	ldap	
    19.65.12.21	lplppkokogrgrr		mpofk
    19.66.64.2	MOkfeokOOkfeooe		okgor	sepogksepoke	OKZOKDZO
    19.66.64.2	RESEAU	
    19.83.12.4	lpuo	
    19.84.12.3	toto.fr.	
    19.84.220.2	toto.fr.	
    19.84.92.2	toto.fr.	
    $
    
    il accepte un nombre quelconque d'espaces ou/et de tabs comme séparateurs de champs
    0
  13. gtasplinter Messages postés 16 Statut Membre
     
    Oui c'est beaucoup mieux :)
    C 'est possible de voir le 2 eme point ? C'est a dire d'avoir :

    19.65.12.21 lplppkokogrgrr mpofk ldap
    19.66.64.2 MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO RESEAU
    19.83.12.4 lpuo
    19.84.12.3 toto.fr.
    19.84.220.2 toto.fr.
    19.84.92.2 toto.fr.

    A la place de :

    19.65.12.21 ldap
    19.65.12.21 lplppkokogrgrr mpofk
    19.66.64.2 MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO
    19.66.64.2 RESEAU
    19.83.12.4 lpuo
    19.84.12.3 toto.fr.
    19.84.220.2 toto.fr.
    19.84.92.2 toto.fr.
    0
  14. gtasplinter Messages postés 16 Statut Membre
     
    C'est parfait. ;) Merci beaucoup.

    Bien puissant la commande awk.

    Bonne continuation à vous.
    0