Vous n'êtes pas identifié(e).
L'icône rouge permet de télécharger chaque page du wiki visitée au format PDF et la grise au format ODT →
Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente Prochaine révision Les deux révisions suivantes | ||
utilisateurs:hypathie:tutos:accueil [17/07/2014 16:53] Hypathie [Synthèse sed] |
utilisateurs:hypathie:tutos:accueil [19/07/2014 09:36] Hypathie [Utiliser conjointement cut ; wc ; grep ; sed] |
||
---|---|---|---|
Ligne 1: | Ligne 1: | ||
- | ====== Utiliser conjointement cut ; wc ; grep ; sed ====== | + | ====== Sed et les expressions rationnelles ====== |
- | * Objet : Petite synthèse cut;grep;sed | + | * Objet : sed |
- | * Niveau requis : FIXME {{tag>débutant avisé}} | + | * Niveau requis : FIXME {{tag>avisé}} |
- | * Commentaires : //Contexte d'utilisation du sujet du tuto. // FIXME | + | * Commentaires : //Tuto en cours de rédaction // FIXME |
* Débutant, à savoir : [[:doc:systeme:commandes:le_debianiste_qui_papillonne|Utiliser GNU/Linux en ligne de commande, tout commence là !.]] :-) | * Débutant, à savoir : [[:doc:systeme:commandes:le_debianiste_qui_papillonne|Utiliser GNU/Linux en ligne de commande, tout commence là !.]] :-) | ||
- | ===== Synthèse sur cut ===== | + | =====Contexte d'utilisation des ER ===== |
- | Soit les trois dernières lignes du fichier /etc/passwd : | + | |
- | <code user> | + | |
- | cat /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | Debian-gdm:x:112:120:Gnome Display Manager:/var/lib/gdm3:/bin/false | + | |
- | hypathie:x:1000:1000:Hypathie,,,:/home/hypathie:/bin/bash | + | |
- | libvirt-qemu:x:113:122:Libvirt Qemu,,,:/var/lib/libvirt:/bin/false | + | |
- | </code> | + | |
- | * Un __champ__ est une chaîne de caractères\\ Par exemple, la dernière ligne ci-dessus est composée de sept champs; ''libvirt-qemu'' ; ''x'' ; ''113'', etc. | + | |
- | * Un __délimiteur__ est ce qui sépare chaque champ\\ ci-dessus c'est '':''. | + | |
- | + | ||
- | ==== Introduction ==== | + | |
- | La commande cut permet d'afficher des zones spécifiques d'un fichier. | + | |
- | + | ||
- | <code> | + | |
- | cut [options] [fichier...] | + | |
- | </code> | + | |
- | ====option -c==== | + | |
- | Sélection par caractère. | + | |
- | ===Exemples=== | + | |
- | > Le premier caractère des trois dernières lignes | + | |
- | <code user> | + | |
- | cut -c 1 /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | D | + | |
- | h | + | |
- | l | + | |
- | </code> | + | |
- | + | ||
- | >Du premier au neuvième caractère | + | |
- | <code user> | + | |
- | cut -c -9 /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | Debian-gd | + | |
- | hypathie: | + | |
- | libvirt-q | + | |
- | </code> | + | |
- | + | ||
- | >Du neuvième au dernier caractère | + | |
- | <code user> | + | |
- | cut -c 9- /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | dm:x:112:120:Gnome Display Manager:/var/lib/gdm3:/bin/false | + | |
- | :x:1000:1000:Hypathie,,,:/home/hypathie:/bin/bash | + | |
- | qemu:x:113:122:Libvirt Qemu,,,:/var/lib/libvirt:/bin/false | + | |
- | </code> | + | |
- | + | ||
- | > Du onzième au vingt-et-unième caractère | + | |
- | <code user> | + | |
- | cut -c 11-21 /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | :x:112:120: | + | |
- | :1000:1000: | + | |
- | mu:x:113:12 | + | |
- | </code> | + | |
- | + | ||
- | <code user> | + | |
- | cut -c 1-9,11-21 /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | saned:x:11:119::/hom | + | |
- | Debian-gd:x:112:120: | + | |
- | hypathie::1000:1000: | + | |
- | libvirt-qmu:x:113:12 | + | |
- | </code> | + | |
- | ===À savoir === | + | |
- | ^Découpages par caractère ^ significations ^ | + | |
- | |cut -c ''-n'' |du caractère 1 à n | | + | |
- | |cut -c ''n-'' |de n jusqu'à la fin | | + | |
- | |cut -c ''n-m'' |de n à m | | + | |
- | |cut -c ''n-m,i-j'' | de n à m et de i à j | | + | |
- | + | ||
- | ====Options -d et -f==== | + | |
- | Découpage par champ (ou colonne), en fonction du délimiteur ''-d'' | + | |
- | Et liste des champs ""-f"". | + | |
- | <note tip> | + | |
- | À savoir.\\ | + | |
- | Par défaut, le délimiteur est la tabulation.\\ | + | |
- | Si dans le fichier à traiter le séparateur est la tabulation, on n'a pas à indiquer l'option ''-d'', mais si le séparateur est un autre caractère, il faut l'indiquer | + | |
- | </note> | + | |
- | ===Exemples=== | + | |
- | + | ||
- | >Coupe en fonction du délimiteur '' -d':' '' et du premier champ ''-f 1'' | + | |
- | <code user> | + | |
- | cut -d':' -f 1 /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | Debian-gdm | + | |
- | hypathie | + | |
- | libvirt-qemu | + | |
- | </code> | + | |
- | + | ||
- | >Coupe en fonction du délimiteur '' -d':' '' et des champs 1 ; 3 et 4 ''-f 1,3,4''. | + | |
- | <code user> | + | |
- | cut -d':' -f 1,3,4 /etc/passwd | + | |
- | </code> | + | |
- | + | ||
- | <code> | + | |
- | Debian-gdm:112:120 | + | |
- | hypathie:1000:1000 | + | |
- | libvirt-qemu:113:122 | + | |
- | </code> | + | |
- | + | ||
- | ===À savoir=== | + | |
- | ^ ^ ^ | + | |
- | |cut -d'délimiteur' -f n | délimiteur et n° champ délimité | | + | |
- | |cut -d'délimiteur' f n,m,...| délimiteur et plusieurs champs | | + | |
- | + | ||
- | ==== wc ==== | + | |
- | Afficher soit le nombre de mots, soit le nombre de ligne, soit le nombre d'octets | + | |
- | <code> | + | |
- | wc [options] [fichier...] | + | |
- | </code> | + | |
- | === Option -l : Afficher les lignes === | + | |
- | >Le nombre d'utilisateur du système ? | + | |
- | <code user> | + | |
- | wc -l /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | 33 /etc/passwd | + | |
- | </code> | + | |
- | + | ||
- | ===Option -w : le nombre de mots=== | + | |
- | <code user> | + | |
- | echo "Coucou à tous">> essai-wc | + | |
- | </code> | + | |
- | <code user> | + | |
- | wc -w essai-wc | + | |
- | </code> | + | |
- | <code> | + | |
- | 3 essai-wc | + | |
- | </code> | + | |
- | + | ||
- | === Options -c : nombre d'octet(s)=== | + | |
- | <code user> | + | |
- | wc -c essai-wc | + | |
- | </code> | + | |
- | <code> | + | |
- | 15 essai-wc | + | |
- | </code> | + | |
- | + | ||
- | =====Synthèse grep ===== | + | |
- | <code> | + | |
- | grep [options] regexp [fichier...] | + | |
- | </code> | + | |
- | + | ||
- | Voir : [[atelier:chantier:bash-vii-globs-etendus-regex#tableau-des-caracteres-utilises-dans-les-expressions-regulieres-etendues|caractères utilisés dans les expressions régulières étendues]] | + | |
- | + | ||
- | ^ ^ ^ | + | |
- | |''-c'' |afficher le décompte des lignes correspondantes | | + | |
- | |''-i'' | ignorer la case | | + | |
- | |''-E'' |utiliser les regexp étendues\\ (correspond à egrep) | | + | |
- | + | ||
- | > Deux utilisations:\\ | + | |
- | >Soit ''grep [options] "expression" /chemin/fichier'' (on applique grep sur un fichier) | + | |
- | >Soit ''grep [options] cmd | regexp'' (on travaille à partir d'un flux d'entrée avec un filtre (pipe)\\ | + | |
- | + | ||
- | + | ||
- | ===Sur un fichier=== | + | |
- | <code user> | + | |
- | grep -E "(:[0-9]{4}:){1}" /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | hypathie:x:1000:1000:Hypathie,,,:/home/hypathie:/bin/bash | + | |
- | </code> | + | |
- | + | ||
- | ===Filtre un flux d'entrée === | + | |
- | <code user> | + | |
- | /sbin/ifconfig | grep -oE "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}" | + | |
- | </code> | + | |
- | <code> | + | |
- | 127.0.0.1 | + | |
- | 255.0.0.0 | + | |
- | 192.168.0.21 | + | |
- | 192.168.0.255 | + | |
- | 255.255.255.0 | + | |
- | </code> | + | |
- | =====Synthèse sed ===== | + | |
- | ===Syntaxe=== | + | |
- | <code> | + | |
- | sed [options] commande [fichier...] | + | |
- | </code> | + | |
- | ou | + | |
- | <code> | + | |
- | sed [options] -f script [fichier...] | + | |
- | </code> | + | |
- | + | ||
- | ===Options=== | + | |
- | ^options ^significations ^ | + | |
- | | ''-e'' | enchaîner plusieurs commandes | | + | |
- | | ''-r'' | utiliser les expressions régulières étendues dans un script | | + | |
- | |''-n'' |mode silencieux : permet de ne rien modifier\\ associée au drapeau p (print) : affichage sur la sortie standard | | + | |
- | |''-f'' |Les commandes sont lues à partir d'un fichier préalablement rédigé. | | + | |
- | |''-i'' |Le fichier est édité sur place.| | + | |
- | + | ||
- | ====Afficher ou modifier un fichier ==== | + | |
- | >Dans les exemples qui suivent, ne considérons que la présence ou l'absence de l'option ''i''; le reste de la commande est expliqué par la suite. | + | |
- | ===sed permet d'afficher sur la sortie standard=== | + | |
- | * Créer un fichier : | + | |
- | <code user> | + | |
- | echo "aaaa BBB cCcC # 12345" >> ~/sed1.txt | + | |
- | </code> | + | |
- | + | ||
- | * Afficher le contenu d'un fichier : | + | |
- | <code user> | + | |
- | sed '' sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa BBB cCcC # 12345 | + | |
- | </code> | + | |
- | ===sed permet d'afficher sa modification (sans modifier le fichier)=== | + | |
- | * remplacer les espaces par des retours à la ligne : | + | |
- | <code user> | + | |
- | sed 's+ +\n+g' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | cCcC | + | |
- | # | + | |
- | 12345 | + | |
- | </code> | + | |
- | + | ||
- | <code user> | + | |
- | sed '' sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa BBB cCcC # 12345 | + | |
- | </code> | + | |
- | === Option -i : modifier le fichier === | + | |
- | + | ||
- | * sauvegarder le fichier d'origine "sed1.txt" avec ''sed -i.bak'' : | + | |
- | <code user> | + | |
- | sed -i.bak 's/sed1.txt//' ~/sed1.txt | + | |
- | </code> | + | |
- | >sed n'a pas afficher sur la sortie standard le contenu du fichier de sauvegarde. | + | |
- | <code user> | + | |
- | cat sed1.txt.bak | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa BBB cCcC # 12345 | + | |
- | </code> | + | |
- | * modifier un fichier avec ''sed -i'' : | + | |
- | <code user> | + | |
- | sed -i 's+ +\n+g' ~/sed1.txt | + | |
- | </code> | + | |
- | <code user> | + | |
- | cat sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | cCcC | + | |
- | # | + | |
- | 12345 | + | |
- | </code> | + | |
- | === Plusieurs options à la suite=== | + | |
- | >Les options doivent se suivre dans un ordre précis | + | |
- | + | ||
- | * ajouter des sauts de ligne : ''sed -i -e 's/$/\\n/' ~/sed1.txt'' | + | |
- | * supprimer les lignes vides : ''sed -i -e '/^$/d' ~/sed1.txt'' | + | |
- | + | ||
- | ====Adressage==== | + | |
- | <code user> | + | |
- | s/motif/substitut/ | + | |
- | -> si motif = une regex | + | |
- | -> alors subtitut = une chaîne de caractère | + | |
- | </code> | + | |
- | >On peut utiliser la syntaxe habituelle, ou la syntaxe étendue avec l'option ''-r''. | + | |
- | <code text man sed> | + | |
- | REGULAR EXPRESSIONS | + | |
- | POSIX.2 BREs should be supported, but they aren't completely because of | + | |
- | performance problems. The \n sequence in a regular expression matches | + | |
- | the newline character, and similarly for \a, \t, and other sequences. | + | |
- | </code> | + | |
- | <note> | + | |
- | * sans ''-r'' : | + | |
- | métacaractères : ''[ ]'' ; ''.'' ; ''*''\\ | + | |
- | //ER// simples : ''?'' ; ''^'' ; ''$'' ; ''+'' ; ''|'' ; ''( )'' | + | |
- | + | ||
- | * avec ''-r'' : | + | |
- | //ER// étendues : | + | |
- | </note> | + | |
- | === Syntaxe d'adressage avec exemple la commande de suppression === | + | |
- | * ''d'' commande de suppression | + | |
- | <code user> | + | |
- | sed '3,4 d' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | 12345 | + | |
- | </code> | + | |
- | > pas d'option : rien n'est modifié | + | |
- | >''d'' : commande de suppression | + | |
- | >''3,4'' : ligne 3 et 4 | + | |
- | + | ||
- | * option ''-e'' et répétition le commande ''d'' : | + | |
- | <code user> | + | |
- | sed -e '3d; 4d' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | 12345 | + | |
- | </code> | + | |
- | * adressage ''/ /'' : | + | |
- | <code user> | + | |
- | sed '/^B/d' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | cCcC | + | |
- | # | + | |
- | 12345 | + | |
- | </code> | + | |
- | * adressage d'une plage ''/ /,/ /'' : | + | |
- | <code user> | + | |
- | sed '/^B/,/^1/d' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | </code> | + | |
====La substitution ==== | ====La substitution ==== | ||
===Syntaxe=== | ===Syntaxe=== | ||
Ligne 343: | Ligne 15: | ||
<code> | <code> | ||
cmd | s/modèle/remplacement/[drapeau] | cmd | s/modèle/remplacement/[drapeau] | ||
- | </code> | ||
- | ===Les drapeaux=== | ||
- | ^ ^ ^ | ||
- | |g | global : toutes les occurrences | | ||
- | |1, 2, etc. | un nombre : la nième occurrence | | ||
- | |w | écrire les modifications effectuées dans un fichier | | ||
- | |p | afficher la ligne modifiée | | ||
- | |e | exécution d'une commande | | ||
- | ===Sans drapeau : première occurrence de chaque ligne=== | ||
- | <code user> | ||
- | sed 's/C/c/' ~/sed1.txt | ||
- | </code> | ||
- | <code> | ||
- | aaaa | ||
- | BBB | ||
- | cccC | ||
- | # | ||
- | 12345 | ||
</code> | </code> | ||
- | ===Drapeau nombre === | ||
- | <code user> | ||
- | sed 's/C/c/2' ~/sed1.txt | ||
- | </code> | ||
- | <code> | ||
- | aaaa | ||
- | BBB | ||
- | cCcc | ||
- | # | ||
- | 12345 | ||
- | </code> | ||
- | === Drapeau w=== | ||
- | <code user> | ||
- | sed "s/12345/6789/w sed1-modif" ~/sed1.txt | ||
- | </code> | ||
- | <code user> | ||
- | cat ~/sed1.txt | ||
- | </code> | ||
- | <code> | ||
- | 6789 | ||
- | </code> | ||
- | ===Deux drapeaux=== | + | =====Sed et les expressions régulières ===== |
- | <code user> | + | |
- | sed 's/C/c/gw modif-sed1.txt' ~/sed1.txt | + | |
- | </code> | + | |
- | + | ||
- | <code user> | + | |
- | aaaa | + | |
- | BBB | + | |
- | cccc | + | |
- | # | + | |
- | 12345 | + | |
- | </code> | + | |
- | + | ||
- | <code> | + | |
- | cccc | + | |
- | </code> | + | |
- | ===Drapeau p=== | + | |
- | >Avec l'option ''-n'' pour éviter les doublons, on utilise le drapeau p ; | + | |
- | >En effet, on a vu que pour chaque modification, tout le texte est affiché. | + | |
- | > drapeau p : il affiche le texte modifié, puis il applique le drapeau, donc affiche ce qui les lignes modifiées. | + | |
- | >Grâce ''-n'', on n'affiche pas ce qui est modifié. | + | |
- | >''-n'' + drapeau p : on affiche que ce qui a été modifié | + | |
- | <code user> | + | |
- | sed -n 's/12345/6789/p' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | 6789 | + | |
- | </code> | + | |
- | + | ||
- | ===Drapeau e=== | + | |
- | >Utilisation de la sortie d'une commande comme chaîne de remplacement. | + | |
- | <code user> | + | |
- | sed 's/^#/date/e' ~/sed1.txt | + | |
- | </code> | + | |
- | + | ||
- | <code user> | + | |
- | cat ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | 6789 | + | |
- | aaaa | + | |
- | BBB | + | |
- | cCcC | + | |
- | mardi 15 juillet 2014, 11:48:27 (UTC+0200) | + | |
- | 12345 | + | |
- | </code> | + | |
- | ==== sed et variables ==== | + | |
- | <code user> | + | |
- | VAR="coucou" | + | |
- | </code> | + | |
- | + | ||
- | <code user> | + | |
- | export VAR | + | |
- | </code> | + | |
- | + | ||
- | <code user> | + | |
- | sed 's/^#/echo '$VAR'/e' ~/sed1.txt | + | |
- | </code> | + | |
- | + | ||
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | cCcC | + | |
- | coucou | + | |
- | 12345 | + | |
- | </code> | + | |
- | ====Quelques autres commandes de sed==== | + | |
- | ^ ^ ^ | + | |
- | |d |supprimer | | + | |
- | |q |quitter | | + | |
- | |p | afficher avec ''-n'' | | + | |
- | |i\texte |insérer du texte| | + | |
- | |a\texte |ajouter du texte | | + | |
- | |c\texte |remplacer du texte | | + | |
- | | = | afficher | | + | |
- | =====Associer sed et les autres commandes ===== | + | |