Vous n'êtes pas identifié(e).
L'icône rouge permet de télécharger chaque page du wiki visitée au format PDF et la grise au format ODT →
Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente Prochaine révision Les deux révisions suivantes | ||
utilisateurs:hypathie:tutos:accueil [18/07/2014 06:29] Hypathie [Synthèse sed] |
utilisateurs:hypathie:tutos:accueil [20/07/2014 10:43] Hypathie [Contexte d'utilisation des ER] |
||
---|---|---|---|
Ligne 1: | Ligne 1: | ||
- | ====== Utiliser conjointement cut ; wc ; grep ; sed ====== | + | ====== Sed et les expressions rationnelles ====== |
- | * Objet : Petite synthèse cut;grep;sed | + | **Objet : Apprendre à utiliser les expressions rationnelles spécifiques à sed.** |
- | * Niveau requis : FIXME {{tag>débutant avisé}} | + | |
- | * Commentaires : //Contexte d'utilisation du sujet du tuto. // FIXME | + | |
- | * Débutant, à savoir : [[:doc:systeme:commandes:le_debianiste_qui_papillonne|Utiliser GNU/Linux en ligne de commande, tout commence là !.]] :-) | + | |
- | ===== Synthèse sur cut ===== | + | * Niveau requis : {{tag>avisé}} |
- | Soit les trois dernières lignes du fichier /etc/passwd : | + | * Commentaires : //Tuto en cours de rédaction // |
- | <code user> | + | |
- | cat /etc/passwd | + | |
- | </code> | + | |
- | <code> | + | |
- | Debian-gdm:x:112:120:Gnome Display Manager:/var/lib/gdm3:/bin/false | + | |
- | hypathie:x:1000:1000:Hypathie,,,:/home/hypathie:/bin/bash | + | |
- | libvirt-qemu:x:113:122:Libvirt Qemu,,,:/var/lib/libvirt:/bin/false | + | |
- | </code> | + | |
- | * Un __champ__ est une chaîne de caractères\\ Par exemple, la dernière ligne ci-dessus est composée de sept champs; ''libvirt-qemu'' ; ''x'' ; ''113'', etc. | + | |
- | * Un __délimiteur__ est ce qui sépare chaque champ\\ ci-dessus c'est '':''. | + | |
- | ==== Introduction ==== | ||
- | La commande cut permet d'afficher des zones spécifiques d'un fichier. | ||
+ | =====Contexte d'utilisation des ER ===== | ||
+ | |||
+ | >Avec sed les ER s'utilisent lorsqu'on veut modifier un fichier texte. | ||
+ | >Il s'agit de matcher un ou des éléments d'un fichier texte par une REGEXP et de remplacer, ce ou ces éléments ciblés du texte, par autres choses ou rien. | ||
+ | >Ou encore, elles servent à ajouter, à un endroit précisé par la regexp, un ou éléments au texte. | ||
+ | |||
+ | ====Les caractères utilisés pour créer des regexp avec sed ==== | ||
+ | <code text info sed> | ||
+ | `-r' | ||
+ | `--regexp-extended' | ||
+ | Use extended regular expressions rather than basic regular | ||
+ | expressions. Extended regexps are those that `egrep' accepts; | ||
+ | they can be clearer because they usually have less backslashes, | ||
+ | but are a GNU extension and hence scripts that use them are not | ||
+ | portable. *Note Extended regular expressions: Extended regexps. | ||
+ | </code> | ||
+ | <note> | ||
+ | Sed utilise une version particulière des expressions régulières. | ||
+ | |||
+ | * **Sans l'option ''-r'' :** | ||
+ | |||
+ | -> __utilisation des expressions régulières de basiques__, c'est-à-dire, celles qui utilisent les métacaractères simples (POSIX) qui sont en communs à tous les programmes utilisant les expressions régulières.\\ En voici un rappel : | ||
+ | ''.'' ; ''*'', ''^'', ''$'', ''[ ]''\\ | ||
+ | |||
+ | -> Il s'y ajoute pour sed __le caractère__ ''&'' :\\ | ||
+ | - ''&'' : Représente la chaîne à remplacer((ce qu'on ajoute autour de ''&'' est ajouté à la chaîne remplacée)). | ||
+ | |||
+ | -> __utilisation des classes__ : | ||
+ | |||
+ | > Attention il y a une petite ambiguïté !\\ Les classes peuvent effectivement être utilisées avec sed sans l'option ''-r'' bien que la documentation de sed renvoie à celle grep -E (ou egrep) où elles font partie des regexp étendues. | ||
+ | |||
+ | ^ ^ ^ | ||
+ | |''<nowiki>[[:alnum:]]</nowiki>'' | Alpha-numerique [a-z A-Z 0-9]| | ||
+ | |''<nowiki>[[:alpha:]]</nowiki>'' | Alphabetic [a-z A-Z] | | ||
+ | |''<nowiki>[[:blank:]]</nowiki>'' | Espaces ou tabulations | | ||
+ | |''<nowiki>[[:cntrl:]]</nowiki>'' | Caractères de contrôle | | ||
+ | |''<nowiki>[[:digit:]]</nowiki>'' | Nombres [0-9] | | ||
+ | |''<nowiki>[[:graph:]]</nowiki>'' | Tous les caractères visibles (à l'exclusion des espaces)| | ||
+ | |''<nowiki>[[:lower:]]</nowiki>'' | Lettres minuscules [a-z] | | ||
+ | |''<nowiki>[[:print:]]</nowiki>'' | Caractères imprimables (tous caractères sauf ceux de contrôle)| | ||
+ | |''<nowiki> | ||
+ | [[:punct:]] </nowiki>'' | Les caractères de ponctuation | | ||
+ | |''<nowiki>[[:space:]]</nowiki>'' | Les espaces | | ||
+ | |''<nowiki>[[:upper:]]</nowiki>'' | Les lettres majuscules [A-Z] | | ||
+ | |''<nowiki>[[:xdigit:]]</nowiki>'' | Chiffres hexadécimaux [0-9 a-f A-F] | | ||
+ | |||
+ | * **avec ''-r'' :** | ||
+ | |||
+ | -> On peut utiliser __les caractères POSIX étendus__ :\\ | ||
+ | |||
+ | ''|'' ; ''+'' ; ''?'' ; ''( )'' ;''{ }'' ; ''<nowiki>[ - ]</nowiki>'' | ||
+ | |||
+ | Auxquels il s'ajoute les caractères non-portables : ''\<'' et ''\>''\\ | ||
+ | -''\<'' : cible le début d'un mot((Attention : Un mot est une chaîne de caractères faite de chiffres, lettres ou de ''_'' et séparée par tout autre caractère qu'un chiffre, une lettre ou le ''_''.)) : ''\<'' doit figurer devant la sous-chaîne désirée\\ | ||
+ | -''\>'' : cible la fin d'un mot : ''\>'' doit figurer en fin de la sous-chaîne désirée | ||
+ | |||
+ | |||
+ | >Voici la liste complète et testée des caractères nécessitant l'option ''-r'' de sed :\\ | ||
+ | >''|'' ; ''+'' ; ''?'' ; ''( )'' ;''{ }'' ; ''<nowiki>[ - ]</nowiki>'' ; ''\<'' ; ''\>''\\ | ||
+ | |||
+ | -> Il s'y ajoute enfin __les raccourcis ci-dessous__. Il s'agit là de l'extension GNU qui n'est pas portable :\\ | ||
+ | |||
+ | ''\f'' : Produit ou correspond à un saut\\ | ||
+ | ''\n'' : Produit ou correspond à un retour à la ligne \\ | ||
+ | ''\r'' : Produit ou correspond à un retour chariot\\ | ||
+ | ''\t'' : Produit ou correspond à un onglet horizontal\\ | ||
+ | ''\v'' : Produit ou correspond à une tabulation verticale\\ | ||
+ | ''\w'' : Synonyme de ''<nowiki>[[:alnum:]]</nowiki>'' -> correspond à un mot.\\ | ||
+ | ''\W'' : Synonyme de ''<nowiki>[^[:alnum]]</nowiki>'' -> ce qui autre qu'un mot.\\ | ||
+ | ''\b'' : Correspond à une chaîne vide (blanc) à l'extrémité d'un mot.\\ ''info\b'' ->l'info pour tous\\ ''\binfo'' -> informatique | ||
+ | ''\B'' : Correspond à une chaîne vide ne se trouvant pas à une extrémité de mot.\\ | ||
+ | ''\a'' : caractère alerte'' | ||
+ | \\dxxx'' : Produit ou correspond à un caractère dont la valeur ascii décimal est xxx\\ ''\cx'' : Control-x \\ | ||
+ | ''\OXXX'' : caractère par valeur aSCII octal\\ | ||
+ | ''\xhh'' : caractère par valeur aSCII hexadécimal. | ||
+ | |||
+ | |||
+ | Référence : [[http://www.gnu.org/software/sed/manual/sed.html#Regular-Expressions|sed, a stream editor, "Overview of Regular Expression Syntax"]] | ||
+ | </note> | ||
+ | |||
+ | Pour utiliser les REGEXP, il faut avant tout maîtriser les syntaxes de substitution, et l'adressage. | ||
+ | =====La substitution===== | ||
+ | ===Syntaxes de substitution=== | ||
<code> | <code> | ||
- | cut [options] [fichier...] | + | s/modèle/remplacement/[drapeau] fichier |
- | </code> | + | |
- | ====option -c==== | + | |
- | Sélection par caractère. | + | |
- | ===Exemples=== | + | |
- | > Le premier caractère des trois dernières lignes | + | |
- | <code user> | + | |
- | cut -c 1 /etc/passwd | + | |
</code> | </code> | ||
+ | ou | ||
<code> | <code> | ||
- | D | + | cmd | s/modèle/remplacement/[drapeau] |
- | h | + | |
- | l | + | |
</code> | </code> | ||
+ | >Voir : [[doc:systeme:sed#la-fonction-de-substitution-s]] | ||
- | >Du premier au neuvième caractère | + | === Détail === |
<code user> | <code user> | ||
- | cut -c -9 /etc/passwd | + | s/motif/substitut/ |
+ | -> si motif = une regexp | ||
+ | -> alors subtitut = une chaîne de caractère | ||
</code> | </code> | ||
- | <code> | + | >Pour REGEXP, on peut utiliser la syntaxe habituelle, ou la syntaxe étendue avec l'option ''-r''. |
- | Debian-gd | + | |
- | hypathie: | + | =====L'adressage ===== |
- | libvirt-q | + | ===Préparation=== |
+ | <code user> | ||
+ | echo "aaaa BBB cCcC # 12345" > ~/sed1.txt | ||
</code> | </code> | ||
- | >Du neuvième au dernier caractère | ||
<code user> | <code user> | ||
- | cut -c 9- /etc/passwd | + | sed -i 's+ +\n+g' ~/sed1.txt && cat sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
- | dm:x:112:120:Gnome Display Manager:/var/lib/gdm3:/bin/false | + | aaaa |
- | :x:1000:1000:Hypathie,,,:/home/hypathie:/bin/bash | + | BBB |
- | qemu:x:113:122:Libvirt Qemu,,,:/var/lib/libvirt:/bin/false | + | cCcC |
+ | # | ||
+ | 12345 | ||
</code> | </code> | ||
- | > Du onzième au vingt-et-unième caractère | + | <note tip> |
+ | Tout cela revient au même ;-) | ||
<code user> | <code user> | ||
- | cut -c 11-21 /etc/passwd | + | echo "aaaa BBB cCcC # 12345" | sed 's+ +\n+g' |
</code> | </code> | ||
- | <code> | + | |
- | :x:112:120: | + | <code user> |
- | :1000:1000: | + | echo "aaaa BBB cCcC # 12345" | sed 's/ /\n/g' |
- | mu:x:113:12 | + | |
</code> | </code> | ||
<code user> | <code user> | ||
- | cut -c 1-9,11-21 /etc/passwd | + | echo "aaaa BBB cCcC # 12345" | sed 's_ _\n_g' |
</code> | </code> | ||
- | <code> | ||
- | saned:x:11:119::/hom | ||
- | Debian-gd:x:112:120: | ||
- | hypathie::1000:1000: | ||
- | libvirt-qmu:x:113:12 | ||
- | </code> | ||
- | ===À savoir === | ||
- | ^Découpages par caractère ^ significations ^ | ||
- | |cut -c ''-n'' |du caractère 1 à n | | ||
- | |cut -c ''n-'' |de n jusqu'à la fin | | ||
- | |cut -c ''n-m'' |de n à m | | ||
- | |cut -c ''n-m,i-j'' | de n à m et de i à j | | ||
- | ====Options -d et -f==== | + | voir : [[utilisateurs:hypathie:tutos:accueil#changer-de-selecteur-d-adressage|changer de sélecteur d'adressage]] |
- | Découpage par champ (ou colonne), en fonction du délimiteur ''-d'' | + | |
- | Et liste des champs ""-f"". | + | |
- | <note tip> | + | |
- | À savoir.\\ | + | |
- | Par défaut, le délimiteur est la tabulation.\\ | + | |
- | Si dans le fichier à traiter le séparateur est la tabulation, on n'a pas à indiquer l'option ''-d'', mais si le séparateur est un autre caractère, il faut l'indiquer | + | |
</note> | </note> | ||
- | ===Exemples=== | ||
- | >Coupe en fonction du délimiteur '' -d':' '' et du premier champ ''-f 1'' | + | === Adressage avec numéro de lignes === |
+ | |||
+ | * Exemple avec la commande de suppression ''d'' | ||
<code user> | <code user> | ||
- | cut -d':' -f 1 /etc/passwd | + | sed '3,4 d' ~/sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
- | Debian-gdm | + | aaaa |
- | hypathie | + | BBB |
- | libvirt-qemu | + | 12345 |
</code> | </code> | ||
+ | > pas d'option : rien n'est modifié | ||
+ | >''d'' : commande de suppression | ||
+ | >''3,4'' : ligne 3 et 4 | ||
+ | |||
+ | * option ''-e'' et répétition le commande ''d'' : | ||
- | >Coupe en fonction du délimiteur '' -d':' '' et des champs 1 ; 3 et 4 ''-f 1,3,4''. | ||
<code user> | <code user> | ||
- | cut -d':' -f 1,3,4 /etc/passwd | + | sed -e '3d; 4d' ~/sed1.txt |
</code> | </code> | ||
- | |||
<code> | <code> | ||
- | Debian-gdm:112:120 | + | aaaa |
- | hypathie:1000:1000 | + | BBB |
- | libvirt-qemu:113:122 | + | 12345 |
</code> | </code> | ||
- | + | ===Adressage avec délimiteurs "/ /" :=== | |
- | ===À savoir=== | + | |
- | ^ ^ ^ | + | |
- | |cut -d'délimiteur' -f n | délimiteur et n° champ délimité | | + | |
- | |cut -d'délimiteur' f n,m,...| délimiteur et plusieurs champs | | + | |
- | + | ||
- | ==== wc ==== | + | |
- | Afficher soit le nombre de mots, soit le nombre de ligne, soit le nombre d'octets | + | |
- | <code> | + | |
- | wc [options] [fichier...] | + | |
- | </code> | + | |
- | === Option -l : Afficher les lignes === | + | |
- | >Le nombre d'utilisateur du système ? | + | |
<code user> | <code user> | ||
- | wc -l /etc/passwd | + | sed '/^B/d' ~/sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
- | 33 /etc/passwd | + | aaaa |
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
</code> | </code> | ||
- | ===Option -w : le nombre de mots=== | + | ===Changer de sélecteur d'adressage === |
<code user> | <code user> | ||
- | echo "Coucou à tous">> essai-wc | + | echo "/coucou/titi" >> sed1.txt && cat sed1.txt |
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | /coucou/titi | ||
</code> | </code> | ||
<code user> | <code user> | ||
- | wc -w essai-wc | + | sed 's/\/coucou\/titi/gaga/' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
- | 3 essai-wc | + | aaaa |
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | gaga | ||
</code> | </code> | ||
- | === Options -c : nombre d'octet(s)=== | + | > Qu'on peut remplacer par : |
<code user> | <code user> | ||
- | wc -c essai-wc | + | sed 's_/coucou/titi_gaga_' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
- | 15 essai-wc | + | aaaa |
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | gaga | ||
+ | |||
+ | </code> | ||
+ | ===Adressage d'une plage avec délimiteurs "/ /,/ /" :=== | ||
+ | <code user> | ||
+ | sed '/^B/,/^1/d' ~/sed1.txt | ||
</code> | </code> | ||
- | |||
- | =====Synthèse grep ===== | ||
<code> | <code> | ||
- | grep [options] regexp [fichier...] | + | aaaa |
</code> | </code> | ||
- | Voir : [[atelier:chantier:bash-vii-globs-etendus-regex#tableau-des-caracteres-utilises-dans-les-expressions-regulieres-etendues|caractères utilisés dans les expressions régulières étendues]] | + | ===Adressage mixte=== |
+ | ''n'' et ''m'' sont des nombres entiers naturels | ||
- | ^ ^ ^ | + | * sed 'n,ms/chaine 1/chaine 2/' fichier |
- | |''-c'' |afficher le décompte des lignes correspondantes | | + | |
- | |''-i'' | ignorer la case | | + | |
- | |''-E'' |utiliser les regexp étendues\\ (correspond à egrep) | | + | |
- | > Deux utilisations:\\ | + | >On remplace chaine 1 par chaine 2 de la ligne n à la ligne m. |
- | >Soit ''grep [options] "expression" /chemin/fichier'' (on applique grep sur un fichier) | + | |
- | >Soit ''grep [options] cmd | regexp'' (on travaille à partir d'un flux d'entrée avec un filtre (pipe)\\ | + | |
+ | * sed '/chaine 1/s/chaine 2/chaine 3/' fichier | ||
+ | |||
+ | >On remplace chaine 2 par chaine 3 pour la ou les ligne(s) adressées par chaine 1. | ||
- | ===Sur un fichier=== | ||
<code user> | <code user> | ||
- | grep -E "(:[0-9]{4}:){1}" /etc/passwd | + | cat sed1.txt |
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed '2,6s/BBB/GAGA/' sed1.txt | ||
+ | </code> | ||
+ | ou | ||
+ | <code user> | ||
+ | sed -r '2,6s/B{3}/GAGA/' sed1.txt | ||
</code> | </code> | ||
<code> | <code> | ||
- | hypathie:x:1000:1000:Hypathie,,,:/home/hypathie:/bin/bash | + | aaaa |
+ | GAGA | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | GAGA | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | ===Filtre un flux d'entrée === | ||
<code user> | <code user> | ||
- | /sbin/ifconfig | grep -oE "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}" | + | sed '/BBB/s/BBB/GAGA/' sed1.txt |
</code> | </code> | ||
- | <code> | + | ou |
- | 127.0.0.1 | + | <code user> |
- | 255.0.0.0 | + | sed -r '/B{3}/s/BBB/GAGA/' sed1.txt |
- | 192.168.0.21 | + | |
- | 192.168.0.255 | + | |
- | 255.255.255.0 | + | |
</code> | </code> | ||
- | =====Synthèse sed ===== | ||
- | ===Syntaxe=== | ||
<code> | <code> | ||
- | sed [options] commande [fichier...] | + | aaaa |
- | </code> | + | GAGA |
- | ou | + | cCcC |
- | <code> | + | # |
- | sed [options] -f script [fichier...] | + | 12345 |
+ | GAGA | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | ===Options=== | + | =====Exercices : Sed et les regexp simples ===== |
- | ^options ^significations ^ | + | |
- | | ''-e'' | enchaîner plusieurs commandes | | + | |
- | | ''-r'' | utiliser les expressions régulières étendues dans un script | | + | |
- | |''-n'' |mode silencieux : permet de ne rien modifier\\ associée au drapeau p (print) : affichage sur la sortie standard | | + | |
- | |''-f'' |Les commandes sont lues à partir d'un fichier préalablement rédigé. | | + | |
- | |''-i'' |Le fichier est édité sur place.| | + | |
- | ====Afficher ou modifier un fichier ==== | + | === le point (.)=== |
- | >Dans les exemples qui suivent, ne considérons que la présence ou l'absence de l'option ''i''; le reste de la commande est expliqué par la suite. | + | |
- | ===sed permet d'afficher sur la sortie standard=== | + | |
- | * Créer un fichier : | + | |
<code user> | <code user> | ||
- | echo "aaaa BBB cCcC # 12345" >> ~/sed1.txt | + | cat sed1.txt |
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | + | * Exemple 1 : | |
- | * Afficher le contenu d'un fichier : | + | |
<code user> | <code user> | ||
- | sed '' sed1.txt | + | sed 's/./GAGA/' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa BBB cCcC # 12345 | + | GAGAaaa |
+ | GAGABB | ||
+ | GAGACcC | ||
+ | GAGA | ||
+ | GAGA2345 | ||
+ | GAGABB | ||
+ | GAGAiti cCcC | ||
</code> | </code> | ||
- | ===sed permet d'afficher sa modification (sans modifier le fichier)=== | + | * Exemple 2, point<espace> : |
- | * remplacer les espaces par des retours à la ligne : | + | |
<code user> | <code user> | ||
- | sed 's+ +\n+g' ~/sed1.txt | + | sed 's/. /GAGA/' sed1.txt |
- | </code> | + | |
- | <code> | + | |
aaaa | aaaa | ||
BBB | BBB | ||
cCcC | cCcC | ||
# | # | ||
- | 12345 | + | 12345 |
+ | BBB | ||
+ | titGAGAcCcC | ||
</code> | </code> | ||
+ | * Exemple 3 : | ||
+ | <code user> | ||
+ | sed '/./s/#/GAGA/' sed1.txt | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | GAGA | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | === le caractère ^ === | ||
+ | * suppression de la ligne commençant par # | ||
<code user> | <code user> | ||
- | sed '' sed1.txt | + | sed '/^#/ d' ~/sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa BBB cCcC # 12345 | + | aaaa |
+ | BBB | ||
+ | cCcC | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | === Option -i : modifier le fichier === | ||
- | * sauvegarder le fichier d'origine "sed1.txt" avec ''sed -i.bak'' : | + | * Ne pas supprimer le ligne qui commence par # |
<code user> | <code user> | ||
- | sed -i.bak 's/sed1.txt//' ~/sed1.txt | + | sed '/^#/ !d' ~/sed1.txt |
- | </code> | + | |
- | >sed n'a pas afficher sur la sortie standard le contenu du fichier de sauvegarde. | + | |
- | <code user> | + | |
- | cat sed1.txt.bak | + | |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa BBB cCcC # 12345 | + | # |
</code> | </code> | ||
- | * modifier un fichier avec ''sed -i'' : | + | |
+ | ===le caractère ($)=== | ||
<code user> | <code user> | ||
- | sed -i 's+ +\n+g' ~/sed1.txt | + | sed '/[C]$/s/[Cc]./GAGA/g' sed1.txt |
- | </code> | + | |
- | <code user> | + | |
- | cat sed1.txt | + | |
</code> | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
BBB | BBB | ||
- | cCcC | + | GAGAGAGA |
# | # | ||
12345 | 12345 | ||
+ | BBB | ||
+ | titi GAGAGAGA | ||
</code> | </code> | ||
- | === Plusieurs options à la suite=== | ||
- | >Les options doivent se suivre dans un ordre précis | ||
- | * ajouter des sauts de ligne : ''sed -i -e 's/$/\\n/' ~/sed1.txt'' | + | === Point, étoile, crochets=== |
- | * supprimer les lignes vides : ''sed -i -e '/^$/d' ~/sed1.txt'' | + | |
- | + | ||
- | ====Adressage==== | + | |
<code user> | <code user> | ||
- | s/motif/substitut/ | + | sed '/[C]$/s/[Cc]./GAGA/g' sed1.txt |
- | -> si motif = une regex | + | </code> |
- | -> alors subtitut = une chaîne de caractère | + | <code> |
+ | aaaa | ||
+ | BBB | ||
+ | GAGAGAGA | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi GAGAGAGA | ||
</code> | </code> | ||
- | >On peut utiliser la syntaxe habituelle, ou la syntaxe étendue avec l'option ''-r''. | ||
- | <code text man sed> | ||
- | -r, --regexp-extended | ||
- | |||
- | use extended regular expressions in the script. | ||
- | //[...]// | ||
- | REGULAR EXPRESSIONS | ||
- | POSIX.2 BREs should be supported, but they aren't completely because of | ||
- | performance problems. The \n sequence in a regular expression matches | ||
- | the newline character, and similarly for \a, \t, and other sequences. | ||
- | </code> | ||
- | <note> | ||
- | * sans ''-r'' : | ||
- | métacaractères : ''[ ]'' ; ''.'' ; ''*''\\ | ||
- | //ER// simples : ''?'' ; ''^'' ; ''$'' ; ''+'' ; ''|'' ; ''( )'' | ||
- | |||
- | * avec ''-r'' : | ||
- | //ER// étendues : | ||
- | </note> | ||
- | === Syntaxe d'adressage avec exemple la commande de suppression === | ||
- | * ''d'' commande de suppression | ||
<code user> | <code user> | ||
- | sed '3,4 d' ~/sed1.txt | + | sed '/[C]$/s/[Cc].*/GAGA/g' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
BBB | BBB | ||
+ | GAGA | ||
+ | # | ||
12345 | 12345 | ||
+ | BBB | ||
+ | titi GAGA | ||
</code> | </code> | ||
- | > pas d'option : rien n'est modifié | ||
- | >''d'' : commande de suppression | ||
- | >''3,4'' : ligne 3 et 4 | ||
- | * option ''-e'' et répétition le commande ''d'' : | ||
<code user> | <code user> | ||
- | sed -e '3d; 4d' ~/sed1.txt | + | sed '/[1-5]/ d' ~/sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
BBB | BBB | ||
- | 12345 | + | cCcC |
+ | # | ||
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | * adressage ''/ /'' : | + | |
<code user> | <code user> | ||
- | sed '/^B/d' ~/sed1.txt | + | sed 's/[1-5]/gaga/g' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
+ | BBB | ||
cCcC | cCcC | ||
# | # | ||
- | 12345 | + | gagagagagagagagagaga |
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | * adressage d'une plage ''/ /,/ /'' : | + | |
<code user> | <code user> | ||
- | sed '/^B/,/^1/d' ~/sed1.txt | + | sed '/[1-5]/s/[1-5]*/gaga/g' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | gaga | ||
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | ====La substitution ==== | + | |
- | ===Syntaxe=== | + | ===Le caractère & === |
- | <code> | + | |
- | s/modèle/remplacement/[drapeau] fichier | + | <code user> |
+ | sed 's/[0-9][0-9]*$/[&]/' sed1.txt | ||
</code> | </code> | ||
- | ou | ||
<code> | <code> | ||
- | cmd | s/modèle/remplacement/[drapeau] | + | aaaa |
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | [12345] | ||
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | ===Les drapeaux=== | ||
- | ^ ^ ^ | ||
- | |g | global : toutes les occurrences | | ||
- | |1, 2, etc. | un nombre : la nième occurrence | | ||
- | |w | écrire les modifications effectuées dans un fichier | | ||
- | |p | afficher la ligne modifiée | | ||
- | |e | exécution d'une commande | | ||
- | ===Sans drapeau : première occurrence de chaque ligne=== | ||
<code user> | <code user> | ||
- | sed 's/C/c/' ~/sed1.txt | + | sed 's/[0-9][0-9]*$/(&)/' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
BBB | BBB | ||
- | cccC | + | cCcC |
# | # | ||
- | 12345 | + | (12345) |
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | ===Drapeau nombre === | + | ===Les classes=== |
<code user> | <code user> | ||
- | sed 's/C/c/2' ~/sed1.txt | + | sed 's/[[:digit:]]/gaga/g' sed1.txt |
</code> | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
BBB | BBB | ||
- | cCcc | + | cCcC |
# | # | ||
- | 12345 | + | gagagagagagagagagaga |
+ | BBB | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | === Drapeau w=== | + | |
<code user> | <code user> | ||
- | sed "s/12345/6789/w sed1-modif" ~/sed1.txt | + | sed 's/[[:alpha:]]*/gaga/g' sed1.txt |
</code> | </code> | ||
+ | <code> | ||
+ | gaga | ||
+ | gaga | ||
+ | gaga | ||
+ | gaga#gaga | ||
+ | gaga1gaga2gaga3gaga4gaga5gaga | ||
+ | gaga | ||
+ | gaga gaga | ||
+ | gaga/gaga/gaga | ||
+ | </code> | ||
+ | |||
+ | ====Sed -r : les caractères étendues ==== | ||
+ | ===Rappel=== | ||
+ | ''|'' ; ''^'' ; ''$'' ; ''.'' ; ''*'' ; ''+'' ; ''?'' ; ''( )'' ; ''['' ; ''{ }'' | ||
+ | ===Exercices : matcher et remplacer une chaîne par OK === | ||
+ | * Hello | ||
<code user> | <code user> | ||
- | cat ~/sed1.txt | + | echo "coucou Hello Yep" | sed -r 's/[A-Z]{1}[a-z]{4}/OK/g' |
</code> | </code> | ||
<code> | <code> | ||
- | 6789 | + | coucou OK Yep |
</code> | </code> | ||
- | ===Deux drapeaux=== | + | * ABC-123 abc-123 |
<code user> | <code user> | ||
- | sed 's/C/c/gw modif-sed1.txt' ~/sed1.txt | + | echo "ABC-123 abc-123" | sed -r 's/[A-Z]{3}-[[:digit:]]{3}\ |
+ | [[a-z]{3}-[[:digit:]]{3}/OK/' | ||
+ | OK | ||
</code> | </code> | ||
+ | |||
+ | <note tip> | ||
+ | SHELL : ''\''\\ | ||
+ | |||
+ | -> Les longues commandes peuvent être sectionnées avec :\\ | ||
+ | |||
+ | \<retour à la ligne>[<espace>] | ||
+ | |||
+ | </note> | ||
+ | |||
+ | * ab efab ef | ||
<code user> | <code user> | ||
- | aaaa | + | echo "123ab efab ef123" | sed -r 's/(ab[[:blank:]]ef){2}/OK/' |
- | BBB | + | 123OK123 |
- | cccc | + | |
- | # | + | |
- | 12345 | + | |
</code> | </code> | ||
- | <code> | + | * 123ab efab ef123 par trois "OK" |
- | cccc | + | |
+ | <code user> | ||
+ | echo "123ab efab ef123" | sed -r -e 's/(ab[[:blank:]]ef){2}/OK/g'\ | ||
+ | -e 's/[[:digit:]]{3}/OK/g' | ||
+ | OKOKOK | ||
</code> | </code> | ||
- | ===Drapeau p=== | + | |
- | >Avec l'option ''-n'' pour éviter les doublons, on utilise le drapeau p ; | + | * ab ou cd par OK |
- | >En effet, on a vu que pour chaque modification, tout le texte est affiché. | + | |
- | > drapeau p : il affiche le texte modifié, puis il applique le drapeau, donc affiche ce qui les lignes modifiées. | + | |
- | >Grâce ''-n'', on n'affiche pas ce qui est modifié. | + | |
- | >''-n'' + drapeau p : on affiche que ce qui a été modifié | + | |
<code user> | <code user> | ||
- | sed -n 's/12345/6789/p' ~/sed1.txt | + | echo "abef cdef efgh abcd" | sed -r 's/ab|cd/OK/g' |
+ | OKef OKef efgh OKOK | ||
</code> | </code> | ||
- | <code> | + | |
- | 6789 | + | * ab ou cd par OK et efface le reste |
+ | |||
+ | <code user> | ||
+ | echo "lflfabef cdef efgh ftyabcdopm" | sed -r\ | ||
+ | 's/^.*[ab|cd]*/OK/g' | ||
+ | OK | ||
</code> | </code> | ||
- | ===Drapeau e=== | + | * seulement aaa, aaaa et aaaaa par OK |
- | >Utilisation de la sortie d'une commande comme chaîne de remplacement. | + | |
<code user> | <code user> | ||
- | sed 's/^#/date/e' ~/sed1.txt | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa aaaaaaa" | sed -r\ |
+ | 's/a{3,5}/OK/g' | ||
+ | a aa OK OK OKa OKOK OKaa | ||
</code> | </code> | ||
+ | |||
+ | * trois "a" et plus par OK | ||
<code user> | <code user> | ||
- | cat ~/sed1.txt | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{3,}/OK/g' |
+ | a aa OK OK OK OK | ||
</code> | </code> | ||
- | <code> | + | |
- | 6789 | + | * jusqu'à trois "a" par OK |
- | aaaa | + | <note tip> |
- | BBB | + | Attention !\\ Les chaînes comportant plus de trois "a" contiennent aussi moins de trois "a". |
- | cCcC | + | <code user> |
- | mardi 15 juillet 2014, 11:48:27 (UTC+0200) | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{,3}/OK/g' |
- | 12345 | + | OK OK OK OKOK OKOK OKOKOK |
</code> | </code> | ||
- | ==== sed et variables ==== | + | |
<code user> | <code user> | ||
- | VAR="coucou" | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\ |
+ | 's/(a{1}[[:blank:]]|a{2}[[:blank:]])/OK/g' | ||
+ | OKOKaOKaaOKaaaaOKaaaaaaaa | ||
</code> | </code> | ||
+ | </note> | ||
<code user> | <code user> | ||
- | export VAR | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\ |
+ | -e 's/(a{1}[[:blank:]])/OK/' -e 's/(a{2}[[:blank:]])/OK/' | ||
+ | OKOKaaa aaaa aaaaaa aaaaaaaa | ||
</code> | </code> | ||
+ | |||
+ | * zéro ou une fois "z" par OK | ||
<code user> | <code user> | ||
- | sed 's/^#/echo '$VAR'/e' ~/sed1.txt | + | echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az?bc/OK/g' |
+ | OK OK azzbc azzzbc azzzzbc | ||
</code> | </code> | ||
+ | * une ou plusieurs fois "z" par OK | ||
+ | |||
+ | <code user> | ||
+ | echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az+bc/OK/g' | ||
+ | abc OK OK OK OK | ||
+ | </code> | ||
+ | |||
+ | =====Sed et les expressions rationnelles étendues ===== | ||
+ | === le "ou" (|)=== | ||
+ | <code user> | ||
+ | sed -r 's/a|c/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | gagagagagagagaga | ||
+ | BBB | ||
+ | gagaCgagaC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi gagaCgagaC | ||
+ | </code> | ||
+ | ===Parenthèses=== | ||
+ | <code user> | ||
+ | sed -r 's/(a|B).*/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | gaga | ||
+ | gaga | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | gaga | ||
+ | titi cCcC | ||
+ | hypathie@debian:~$ | ||
+ | </code> | ||
+ | ===Les accolades === | ||
+ | <code> | ||
+ | sed 's/a{1,4}/gaga/g' sed1.txt | ||
+ | </code> | ||
<code> | <code> | ||
aaaa | aaaa | ||
BBB | BBB | ||
cCcC | cCcC | ||
- | coucou | + | # |
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | <code user> | ||
+ | sed -r 's/(a|B).*/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | gaga | ||
+ | gaga | ||
+ | cCcC | ||
+ | # | ||
12345 | 12345 | ||
+ | gaga | ||
+ | titi cCcC | ||
</code> | </code> | ||
- | ====Quelques autres commandes de sed==== | ||
- | ^ ^ ^ | ||
- | |d |supprimer | | ||
- | |q |quitter | | ||
- | |p | afficher avec ''-n'' | | ||
- | |i\texte |insérer du texte| | ||
- | |a\texte |ajouter du texte | | ||
- | |c\texte |remplacer du texte | | ||
- | | = | afficher | | ||
- | =====Associer sed et les autres commandes ===== | ||