Script BASH : récupération variable dans fichier txt

Résolu
gtasplinter -  
Bonjour à tous,

Je suis sous Redhat et j'aimerai faire un script qui me permet de récupérer dans un fichier des variables. le problème est que mon fichier n'est pas formaté de la même façon.
Pour être plus claire, voilà un exemple de la tête de mon fichier : (les éléments que je veux récupérer et stocker sont en gras)

toto.txt :

;*************
; A records
;*************
lplppkokogrgrr 3600 IN A 19.65.12.21
LOkfeokOOkfeooe 3600 IN A 19.66.64.2
;****************
; CNAME records
;****************
mpofk.toto.fr. 3600 IN CNAME 0TuTTfTdTIfIfOdO.toto.fr.
okgor.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
zfplepfkNC.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
;************************************
; Other resource records
;************************************
sepogksepoke.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
OKZOKDZO.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
toto.fr. 600 IN A 19.83.190.2
lpuo 300 IN A 19.83.12.3

Donc en gros, ce que je voudrai faire c'est trouver des commandes qui permettent de récupérer dans 2 variables les infos en gras et les copier dans un nouveau fichier. (A savoir que j'ai plusieurs espace entre les différent champs : variable1 <X espaces> 3600 <X espaces> IN <X espaces> A <X espaces> variable 2)

13 réponses

  1. gtasplinter Auteur
    C'est parfait. ;) Merci beaucoup.

    Bien puissant la commande awk.

    Bonne continuation à vous.
    0
    1. dubcek Contributeur 
      $ awk -v OFS='\t' '/IN[ \t]+A/ {t[$NF]=t[$NF] OFS $1} /IN[ \t]+CNAME/ {split($NF, t1, "."); split($1, t2, "."); a[t1[1]]=a[t1[1]] OFS t2[1]} END{for(n in t){split(t[n], t3); print n, t[n], a[t3[1]]}}' test| sort
19.65.12.21		lplppkokogrgrr	ldap		mpofk
19.66.64.2		MOkfeokOOkfeooe	RESEAU		okgor	sepogksepoke	OKZOKDZO
19.83.12.4		lpuo	
19.84.12.3		toto.fr.	
19.84.220.2		toto.fr.	
19.84.92.2		toto.fr.	
$ 
$
      1
      1. gtasplinter Auteur
        Oui c'est beaucoup mieux :)
        C 'est possible de voir le 2 eme point ? C'est a dire d'avoir :

        19.65.12.21 lplppkokogrgrr mpofk ldap
        19.66.64.2 MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO RESEAU
        19.83.12.4 lpuo
        19.84.12.3 toto.fr.
        19.84.220.2 toto.fr.
        19.84.92.2 toto.fr.

        A la place de :

        19.65.12.21 ldap
        19.65.12.21 lplppkokogrgrr mpofk
        19.66.64.2 MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO
        19.66.64.2 RESEAU
        19.83.12.4 lpuo
        19.84.12.3 toto.fr.
        19.84.220.2 toto.fr.
        19.84.92.2 toto.fr.
        0
        1. dubcek Contributeur
          effectivement, en utilisant le nom comme index, plusieurs fois le même nom posait un problème, essayer 
          $ awk '/IN[ \t]+A/ {t[$1, $NF]=$NF} /IN[ \t]+CNAME/ {x=$0; FS="[. \t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS="\t"; FS="[ \t]*"} END{for(n in t){split(n, b, SUBSEP); print t[n], b[1], a[b[1]]}}'  test | sort
19.65.12.21	ldap	
19.65.12.21	lplppkokogrgrr		mpofk
19.66.64.2	MOkfeokOOkfeooe		okgor	sepogksepoke	OKZOKDZO
19.66.64.2	RESEAU	
19.83.12.4	lpuo	
19.84.12.3	toto.fr.	
19.84.220.2	toto.fr.	
19.84.92.2	toto.fr.	
$
          il accepte un nombre quelconque d'espaces ou/et de tabs comme séparateurs de champs
          0
          2. gtasplinter Auteur
            Bonjour, j'aurai une dernière question. Après quelque test j'ai remarqué un problème.

            Dans le cas ou mon fichier d'origine est :

            [root@099-lab-scm1 TestVitalQIP]# cat Test
            ;*************
            ; A records
            ;*************
            lplppkokogrgrr 3600 IN A 19.65.12.21
            MOkfeokOOkfeooe 3600 IN A 19.66.64.2
            ;****************
            ; CNAME records
            ;****************
            mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
            okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
            ;************************************
            ; Other resource records
            ;************************************
            sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
            OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
            lpuo 300 IN A 19.83.12.4
            toto.fr. 600 IN A 19.84.220.2
            toto.fr. 600 IN A 19.84.92.2
            toto.fr. 600 IN A 19.84.12.3
            ldap 300 IN A 19.65.12.21
            RESEAU 3600 IN A 19.66.64.2

            Après la commande j'ai :

            [root@099-lab-scm1 TestVitalQIP]# awk '/IN A/ {t[$1]=$NF} /IN CNAME/ {x=$0; FS="[.\t ]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS="\t"; FS="[ \t]*"} END{for(n in t)print t[n], n, a[n]}' Test | sort
            19.65.12.21 ldap
            19.65.12.21 lplppkokogrgrr mpofk
            19.66.64.2 MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO
            19.66.64.2 RESEAU
            19.83.12.4 lpuo
            19.84.12.3 toto.fr.

            Il me manque :
            19.84.220.2 toto.fr.
            19.84.92.2 toto.fr.

            Et je voudrai que mon nom "RESEAU" se rajouter a la ligne 19.66.64.2 idem pour ldap en 19.65.12.21 et ainsi de suite...
            0
            1. gtasplinter
              Merci encore de m'aider,

              j'ai essayé la commande suivante :

              ]# awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS=FS="\t"} END{for(n in t)print t[n], n, a[n]}' Test > Resultat.txt

              Le problème est que je me retrouve avec un fichier vide en sortie :(

              Test.txt :

              ]# cat Test.txt
              ;*************
              ; A records
              ;*************
              lplppkokogrgrr 3600 IN A 19.65.12.21
              MOkfeokOOkfeooe 3600 IN A 19.66.64.2
              ;****************
              ; CNAME records
              ;****************
              mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
              okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
              ;************************************
              ; Other resource records
              ;************************************
              sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
              OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
              lpuo 300 IN A 19.83.12.3
              0
              1. zipe31 Contributeur
                Salut,

                A tout hasard... dans ta commande ton fichier s'appelle "Test" (sans extension) alors qu'apparemment ton fichier s'appelle "Test.txt" (avec une extension), ne serait-ce pas là le problème ?
                0
              2. gtasplinter
                non, j'ai modifier le nom de mon fichier d'origine avant de poster mon message mais j'ai oublier de rajouter l'extension. Mais le problème ne viens pas de là.

                j'ai donc bien mon fichier : Test.txt (avec les infos ci-dessus) et la commande :
                awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS=FS="\t"} END{for(n in t)print t[n], n, a[n]}' Test.txt > Resultat.txt

                Resultat.txt => vide
                0
              3. dubcek Contributeur
                dans le fichier Test.txt, les champs sont bien séparés par des tabs ? 
                plppkokogrgrrtab3600tabINtabAtab19.65.12.21
                0
              4. zipe31 Contributeur
                dans le fichier Test.txt, les champs sont bien séparés par des tabs ?
                Bingo ;-))
                0
              5. gtasplinter
                héhé, bien vu. Effectivement avec des tabulation ça marche mieux.

                j'avais plppkokogrgrrespacetab3600espacetabINespacetabAespacetab19.65.12.21

                Je vais encore vous embêter. Quelle serait la commande à faire si mes tabulations étaient remplacées par X espaces ?
                0
            2. dubcek Contributeur
              modification pour avoir des tabs en sortie 
              $ awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; OFS=FS="\t"} END{for(n in t)print t[n], n, a[n]}' a11
19.83.12.3	lpuo	
19.66.64.2	MOkfeokOOkfeooe		okgor	sepogksepoke	OKZOKDZO
19.65.12.21	lplppkokogrgrr		mpofk
$
              1
              1. dubcek Contributeur
                avec des tabs comme séparateurs 
                $ awk -F"\t" '/IN\tA/ {t[$1]=$NF} /IN\tCNAME/ {x=$0; FS="[.\t]*"; $0=x; c=$(NF-3); a[c]=a[c] "\t" $1; FS="\t"} END{for(n in t)print t[n], n, a[n]}' test.txt 
19.83.12.3 lpuo  
19.66.64.2 MOkfeokOOkfeooe  okgor sepogksepoke OKZOKDZO 
19.65.12.21 lplppkokogrgrr  mpofk 
$
                0
                1. gtasplinter Auteur
                  j'ai essayé avec :

                  p]# cat test.txt
                  ;*************
                  ; A records
                  ;*************
                  lplppkokogrgrr 3600 IN A 19.65.12.21
                  MOkfeokOOkfeooe 3600 IN A 19.66.64.2
                  ;****************
                  ; CNAME records
                  ;****************
                  mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
                  okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
                  ;************************************
                  ; Other resource records
                  ;************************************
                  sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
                  OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
                  lpuo 300 IN A 19.83.12.3

                  ]# awk '/IN A/ {t[$1]=$NF} /IN CNAME/ {x=$0; FS="[. ]*"; $0=x; print t[$(NF-3)], $(NF-3), $1}' test.txt > ResultatT.txt

                  ]# cat ResultatT.txt
                  19.65.12.21 lplppkokogrgrr mpofk
                  19.66.64.2 MOkfeokOOkfeooe okgor
                  19.66.64.2 MOkfeokOOkfeooe sepogksepoke
                  19.66.64.2 MOkfeokOOkfeooe OKZOKDZO

                  C'est pas exactement ce que je voudrai :
                  (il faudrai qu'il n'y ai qu'une seula dresse IP identique par ligne et donc que les nom se rajoute sur le meme ligne)
                  19.65.12.21 avec une tabulation lplppkokogrgrr mpofk
                  19.66.64.2 avec une tabulation MOkfeokOOkfeooe okgor sepogksepoke OKZOKDZO
                  19.83.12.3 avec une tabulation lpuo

                  Et sinon j'ai essayer la même chose avec comme mais avec un fichier qui contient des tabulation entre chaque champ. voir exemple sur les 2 première ligne, idem sur toutes les autres. (Avec la meme commande awk ça ne marche pas)

                  # cat test.txt
                  ;*************
                  ; A records
                  ;*************
                  lplppkokogrgrr avec une tabulation 3600 avec une tabulationIN avec une tabulation A avec une tabulation19.65.12.21
                  MOkfeokOOkfeooe avec une tabulation3600 avec une tabulationIN avec une tabulationA avec une tabulation19.66.64.2
                  ;****************
                  ; CNAME records
                  ;****************
                  mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
                  okgor.toto.fr. 3600 IN CNAME MOkfeokOOkfeooe.toto.fr.
                  ;************************************
                  ; Other resource records
                  ;************************************
                  sepogksepoke.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
                  OKZOKDZO.toto.fr. IN CNAME MOkfeokOOkfeooe.toto.fr.
                  lpuo 300 IN A 19.83.12.3

                  DSL, mais je ne maîtrise pas beaucoup la commande awk.
                  0
                  1. dubcek Contributeur
                    essayer 
                    $ cat a1
lplppkokogrgrr 3600 IN A 19.65.12.21
;****************
; CNAME records
;****************
mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.
$ awk '/IN A/ {t[$1]=$NF} /IN CNAME/ {x=$0; FS="[. ]*"; $0=x; print t[$(NF-3)], $(NF-3), $1}' a1
19.65.12.21 lplppkokogrgrr mpofk
$
                    0
                    1. gtasplinter Auteur
                      OK merci :)

                      Il reste bien les infos dont j'ai besoin (il faut retirer le nom de domaine toto.fr mais un simple "sed " devrait faire l'affaire). Par contre, j'ai besoin de les mettre en variable. Enfin c'est l'idée que j'avais, car j'ai besoin de récupérer les infos pour pouvoir faire un affichage comme dans /etc/hosts

                      Avec donc :

                      @IP Host CNAME

                      (pour CNAME il fait vérifier la derniere variable et la rajouter derriere cette derniere si elle est présente)

                      Exemple :

                      toto.txt

                      lplppkokogrgrr 3600 IN A 19.65.12.21
                      ;****************
                      ; CNAME records
                      ;****************
                      mpofk.toto.fr. 3600 IN CNAME lplppkokogrgrr.toto.fr.

                      fichier de sortie :

                      19.65.12.21 lplppkokogrgrr mpofk

                      etc......
                      0
                      1. dubcek Contributeur
                        hello
                        faut-il quand même passer par des variables ? 
                        awk '/^[^;]/ {print $1, $NF}' fichier > nouveau_fichier
                        0
                        1. zipe31 Contributeur
                          Salut, 

                          $ cat plop 
;*************
; A records
;*************
lplppkokogrgrr 3600 IN A 19.65.12.21
LOkfeokOOkfeooe 3600 IN A 19.66.64.2
;****************
; CNAME records
;****************
mpofk.toto.fr. 3600 IN CNAME 0TuTTfTdTIfIfOdO.toto.fr.
okgor.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
zfplepfkNC.toto.fr. 3600 IN CNAME MUMUMUMUPKIOKIU.toto.fr.
;************************************
; Other resource records
;************************************
sepogksepoke.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
OKZOKDZO.toto.fr. IN CNAME plppkokogrgrr.toto.fr.
toto.fr. 600 IN A 19.83.190.2
lpuo 300 IN A 19.83.12.3

$ awk '/IN CNAME/ || /IN A/ { print $1,$NF }' plop 
lplppkokogrgrr 19.65.12.21
LOkfeokOOkfeooe 19.66.64.2
mpofk.toto.fr. 0TuTTfTdTIfIfOdO.toto.fr.
okgor.toto.fr. MUMUMUMUPKIOKIU.toto.fr.
zfplepfkNC.toto.fr. MUMUMUMUPKIOKIU.toto.fr.
sepogksepoke.toto.fr. plppkokogrgrr.toto.fr.
OKZOKDZO.toto.fr. plppkokogrgrr.toto.fr.
toto.fr. 19.83.190.2
lpuo 19.83.12.3

$

                          0

                          Discussions similaires

                          [shell] Comment additionner des valeurs
                          fabriceOb

                          11 réponses
                          Addition en bash
                          Rhfactor

                          4 réponses
                          [bash]Impossible de faire une simple addition
                          tontonbash

                          3 réponses
                          additionner deux réels en shell
                          wida

                          14 réponses
                          recherche script "les visiteurs"
                          stoukboy

                          22 réponses