Vous n'êtes pas identifié(e).
L'icône rouge permet de télécharger chaque page du wiki visitée au format PDF et la grise au format ODT →
Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente Prochaine révision Les deux révisions suivantes | ||
utilisateurs:hypathie:tutos:accueil [19/07/2014 09:36] Hypathie [Utiliser conjointement cut ; wc ; grep ; sed] |
utilisateurs:hypathie:tutos:accueil [19/07/2014 18:29] Hypathie [Contexte d'utilisation des ER] |
||
---|---|---|---|
Ligne 7: | Ligne 7: | ||
=====Contexte d'utilisation des ER ===== | =====Contexte d'utilisation des ER ===== | ||
+ | Avec sed les ER s'utilisent lorsqu'on veut modifier un fichier texte.\\ | ||
+ | Il s'agit de matcher un ou des éléments d'un fichier texte par une REGEXP et de remplacer, ce ou ces éléments ciblés du texte, par autres choses ou rien.\\ | ||
+ | |||
+ | <code text info sed> | ||
+ | `-r' | ||
+ | `--regexp-extended' | ||
+ | Use extended regular expressions rather than basic regular | ||
+ | expressions. Extended regexps are those that `egrep' accepts; | ||
+ | they can be clearer because they usually have less backslashes, | ||
+ | but are a GNU extension and hence scripts that use them are not | ||
+ | portable. *Note Extended regular expressions: Extended regexps. | ||
+ | </code> | ||
+ | <note> | ||
+ | Sed utilise une version particulière des expressions régulières. | ||
+ | |||
+ | * **Sans l'option ''-r'' :** | ||
+ | |||
+ | -> __utilisation des expressions régulières de basiques__, c'est-à-dire, celles qui utilisent les métacaractères simples (POSIX) qui sont en communs à tous les programmes utilisant les expressions régulières.\\ En voici un rappel : | ||
+ | ''*'', ''^'', ''$'', ''[ ]''\\ | ||
+ | |||
+ | -> __utilisation des classes__ : | ||
+ | |||
+ | ^ ^ ^ | ||
+ | |''<nowiki>[[:alnum:]]</nowiki>'' | Alpha-numerique [a-z A-Z 0-9]| | ||
+ | |''<nowiki>[[:alpha:]]</nowiki>'' | Alphabetic [a-z A-Z] | | ||
+ | |''<nowiki>[[:blank:]]</nowiki>'' | Espaces ou tabulations | | ||
+ | |''<nowiki>[[:cntrl:]]</nowiki>'' | Caractères de contrôle | | ||
+ | |''<nowiki>[[:digit:]]</nowiki>'' | Nombres [0-9] | | ||
+ | |''<nowiki>[[:graph:]]</nowiki>'' | Tous les caractères visibles (à l'exclusion des espaces)| | ||
+ | |''<nowiki>[[:lower:]]</nowiki>'' | Lettres minuscules [a-z] | | ||
+ | |''<nowiki>[[:print:]]</nowiki>'' | Caractères imprimables (tous caractères sauf ceux de contrôle)| | ||
+ | |''<nowiki> | ||
+ | [[:punct:]] </nowiki>'' | Les caractères de ponctuation | | ||
+ | |''<nowiki>[[:space:]]</nowiki>'' | Les espaces | | ||
+ | |''<nowiki>[[:upper:]]</nowiki>'' | Les lettres majuscules [A-Z] | | ||
+ | |''<nowiki>[[:xdigit:]]</nowiki>'' | Chiffres hexadécimaux [0-9 a-f A-F] | | ||
+ | |||
+ | -> Il s'y ajoute __le caractère ''&''__ : La chaîne à remplacer dans la chaîne de remplacement. | ||
+ | |||
+ | * **avec ''-r'' :** | ||
+ | |||
+ | -> On peut utiliser __les caractères POSIX étendus__ :\\ | ||
+ | ''|'' ; ''^'' ; ''$'' ; ''.'' ; ''*'' ; ''+'' ; ''?'' ; ''( )'' ; ''['' ; ''{ }''\\ | ||
+ | |||
+ | -> Il s'y ajoute enfin __quelques raccourcis__ à la manière de Perl :\\ | ||
+ | |||
+ | ''f'' : Produit ou correspond à un saut\\ | ||
+ | ''\n'' : Produit ou correspond à un retour à la ligne \\ | ||
+ | ''\r'' : Produit ou correspond à un retour chariot\\ | ||
+ | ''\t'' : Produit ou correspond à un onglet horizontal\\ | ||
+ | ''\v'' : Produit ou correspond à une tabulation verticale\\ | ||
+ | ''\w'' : Correspond à n'importe quel caractère "mot". Un caractère "mot" sera une lettre, un chiffre ou le caractère de soulignement.\\ | ||
+ | ''\W'' : Correspond à tout caractère «non-mot».\\ | ||
+ | ''\b'' : Correspond à une limite de mot.\\ | ||
+ | ''\B'' : Matches partout mais sur une limite de mot.\\ | ||
+ | ''\a'' : caractère alerte'' | ||
+ | \\dxxx'' : Produit ou correspond à un caractère dont la valeur ascii décimal est xxx\\ ''\cx'' : Control-x \\ | ||
+ | ''\OXXX'' : caractère par valeur aSCII octal\\ | ||
+ | ''\xhh'' : caractère par valeur aSCII hexadécimal. | ||
+ | |||
+ | |||
+ | Référence : [[http://www.gnu.org/software/sed/manual/sed.html#Regular-Expressions|sed, a stream editor, "Overview of Regular Expression Syntax"]] | ||
+ | </note> | ||
+ | |||
+ | Pour utiliser les REGEXP, il faut avant tout maîtriser les syntaxes de substitution, et l'adressage. | ||
====La substitution ==== | ====La substitution ==== | ||
- | ===Syntaxe=== | + | ===Syntaxes de substitution=== |
<code> | <code> | ||
s/modèle/remplacement/[drapeau] fichier | s/modèle/remplacement/[drapeau] fichier | ||
Ligne 16: | Ligne 81: | ||
cmd | s/modèle/remplacement/[drapeau] | cmd | s/modèle/remplacement/[drapeau] | ||
</code> | </code> | ||
+ | >Voir : [[doc:systeme:sed#la-fonction-de-substitution-s]] | ||
+ | === détail === | ||
+ | <code user> | ||
+ | s/motif/substitut/ | ||
+ | -> si motif = une regexp | ||
+ | -> alors subtitut = une chaîne de caractère | ||
+ | </code> | ||
+ | >Pour REGEXP, on peut utiliser la syntaxe habituelle, ou la syntaxe étendue avec l'option ''-r''. | ||
- | =====Sed et les expressions régulières ===== | + | ====L'adressage ==== |
+ | ===Préparation=== | ||
+ | <code user> | ||
+ | echo "aaaa BBB cCcC # 12345" > ~/sed1.txt | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed -i 's+ +\n+g' ~/sed1.txt && cat sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | </code> | ||
+ | |||
+ | === Adressage avec numéro de lignes === | ||
+ | |||
+ | * Exemple avec la commande de suppression ''d'' | ||
+ | |||
+ | <code user> | ||
+ | sed '3,4 d' ~/sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | 12345 | ||
+ | </code> | ||
+ | > pas d'option : rien n'est modifié | ||
+ | >''d'' : commande de suppression | ||
+ | >''3,4'' : ligne 3 et 4 | ||
+ | |||
+ | * option ''-e'' et répétition le commande ''d'' : | ||
+ | |||
+ | <code user> | ||
+ | sed -e '3d; 4d' ~/sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | 12345 | ||
+ | </code> | ||
+ | ===Adressage avec délimiteurs "/ /" :=== | ||
+ | <code user> | ||
+ | sed '/^B/d' ~/sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | </code> | ||
+ | |||
+ | ===Changer de sélecteur d'adressage === | ||
+ | <code user> | ||
+ | echo "/coucou/titi" >> sed1.txt && cat sed1.txt | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | /coucou/titi | ||
+ | </code> | ||
+ | <code user> | ||
+ | sed 's/\/coucou\/titi/gaga/' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | gaga | ||
+ | </code> | ||
+ | |||
+ | > Qu'on peut remplacer par : | ||
+ | |||
+ | <code user> | ||
+ | sed 's_/coucou/titi_gaga_' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | gaga | ||
+ | |||
+ | </code> | ||
+ | ===Adressage d'une plage avec délimiteurs "/ /,/ /" :=== | ||
+ | <code user> | ||
+ | sed '/^B/,/^1/d' ~/sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | </code> | ||
+ | |||
+ | ===Adressage mixte=== | ||
+ | ''n'' et ''m'' sont des nombres entiers naturels | ||
+ | |||
+ | * sed 'n,ms/chaine 1/chaine 2/' fichier | ||
+ | |||
+ | >On remplace chaine 1 par chaine 2 de la ligne n à la ligne m. | ||
+ | |||
+ | * sed '/chaine 1/s/chaine 2/chaine 3/' fichier | ||
+ | |||
+ | >On remplace chaine 2 par chaine 3 pour la ou les ligne(s) adressées par chaine 1. | ||
+ | |||
+ | <code user> | ||
+ | cat sed1.txt | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed '2,6s/BBB/GAGA/' sed1.txt | ||
+ | </code> | ||
+ | ou | ||
+ | <code user> | ||
+ | sed -r '2,6s/B{3}/GAGA/' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | GAGA | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | GAGA | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed '/BBB/s/BBB/GAGA/' sed1.txt | ||
+ | </code> | ||
+ | ou | ||
+ | <code user> | ||
+ | sed -r '/B{3}/s/BBB/GAGA/' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | GAGA | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | GAGA | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | ====GO ! Sed et les regexp simples ==== | ||
+ | Exercices | ||
+ | === le point (.)=== | ||
+ | <code user> | ||
+ | cat sed1.txt | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | <code user> | ||
+ | sed 's/./GAGA/' sed1.txt | ||
+ | GAGAaaa | ||
+ | GAGABB | ||
+ | GAGACcC | ||
+ | GAGA | ||
+ | GAGA2345 | ||
+ | GAGABB | ||
+ | GAGAiti cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed 's/. /GAGA/' sed1.txt | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titGAGAcCcC | ||
+ | </code> | ||
+ | Ou | ||
+ | <code user> | ||
+ | sed '/./s/#/GAGA/' sed1.txt | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | GAGA | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | === le caractère ^ === | ||
+ | <code user> | ||
+ | sed '/^#/ d' ~/sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed '/^#/ !d' ~/sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | # | ||
+ | </code> | ||
+ | |||
+ | ===le caractère ($)=== | ||
+ | <code user> | ||
+ | sed '/[C]$/s/[Cc]./GAGA/g' sed1.txt | ||
+ | aaaa | ||
+ | BBB | ||
+ | GAGAGAGA | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi GAGAGAGA | ||
+ | </code> | ||
+ | |||
+ | === Point, étoile, crochets=== | ||
+ | <code user> | ||
+ | sed '/[C]$/s/[Cc]./GAGA/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | GAGAGAGA | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi GAGAGAGA | ||
+ | </code> | ||
+ | <code user> | ||
+ | sed '/[C]$/s/[Cc].*/GAGA/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | GAGA | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi GAGA | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed '/[1-5]/ d' ~/sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed 's/[1-5]/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | gagagagagagagagagaga | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed '/[1-5]/s/[1-5]*/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | gaga | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | ===Le caractère & === | ||
+ | |||
+ | <code user> | ||
+ | sed 's/[0-9][0-9]*$/[&]/' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | [12345] | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | <code user> | ||
+ | sed 's/[0-9][0-9]*$/(&)/' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | (12345) | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | ===Les classes=== | ||
+ | <code user> | ||
+ | sed 's/[[:digit:]]/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | gagagagagagagagagaga | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | sed 's/[[:alpha:]]*/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | gaga | ||
+ | gaga | ||
+ | gaga | ||
+ | gaga#gaga | ||
+ | gaga1gaga2gaga3gaga4gaga5gaga | ||
+ | gaga | ||
+ | gaga gaga | ||
+ | gaga/gaga/gaga | ||
+ | </code> | ||
+ | |||
+ | ====Sed -r : les caractères posix étendues ==== | ||
+ | ===Rappel=== | ||
+ | ''|'' ; ''^'' ; ''$'' ; ''.'' ; ''*'' ; ''+'' ; ''?'' ; ''( )'' ; ''['' ; ''{ }'' | ||
+ | ===Exercices : matcher et remplacer une chaîne par OK === | ||
+ | * Hello | ||
+ | <code user> | ||
+ | echo "coucou Hello Yep" | sed -r 's/[A-Z]{1}[a-z]{4}/OK/g' | ||
+ | </code> | ||
+ | <code> | ||
+ | coucou OK Yep | ||
+ | </code> | ||
+ | |||
+ | * ABC-123 abc-123 | ||
+ | |||
+ | <code user> | ||
+ | echo "ABC-123 abc-123" | sed -r 's/[A-Z]{3}-[[:digit:]]{3}\ | ||
+ | [[a-z]{3}-[[:digit:]]{3}/OK/' | ||
+ | OK | ||
+ | </code> | ||
+ | >Rappel : les longues commandes peuvent être sectionnées avec\\ ''\<retour à la ligne>[<espace>]'' | ||
+ | |||
+ | * ab efab ef | ||
+ | |||
+ | <code user> | ||
+ | echo "123ab efab ef123" | sed -r 's/(ab[[:blank:]]ef){2}/OK/' | ||
+ | 123OK123 | ||
+ | </code> | ||
+ | |||
+ | * 123ab efab ef123 par trois "OK" | ||
+ | |||
+ | <code user> | ||
+ | echo "123ab efab ef123" | sed -r -e 's/(ab[[:blank:]]ef){2}/OK/g'\ | ||
+ | -e 's/[[:digit:]]{3}/OK/g' | ||
+ | OKOKOK | ||
+ | </code> | ||
+ | |||
+ | * ab ou cd par OK | ||
+ | |||
+ | <code user> | ||
+ | echo "abef cdef efgh abcd" | sed -r 's/ab|cd/OK/g' | ||
+ | OKef OKef efgh OKOK | ||
+ | </code> | ||
+ | |||
+ | * ab ou cd par OK et efface le reste | ||
+ | |||
+ | <code user> | ||
+ | echo "lflfabef cdef efgh ftyabcdopm" | sed -r\ | ||
+ | 's/^.*[ab|cd]*/OK/g' | ||
+ | OK | ||
+ | </code> | ||
+ | |||
+ | * seulement aaa, aaaa et aaaaa par OK | ||
+ | <code user> | ||
+ | echo "a aa aaa aaaa aaaaaa aaaaaaaa aaaaaaa" | sed -r\ | ||
+ | 's/a{3,5}/OK/g' | ||
+ | a aa OK OK OKa OKOK OKaa | ||
+ | </code> | ||
+ | |||
+ | * trois "a" et plus par OK | ||
+ | |||
+ | <code user> | ||
+ | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{3,}/OK/g' | ||
+ | a aa OK OK OK OK | ||
+ | </code> | ||
+ | |||
+ | * jusqu'à trois "a" par OK | ||
+ | <note tip> | ||
+ | Attention !\\ Les chaînes comportant plus de trois "a" contiennent aussi moins de trois "a". | ||
+ | <code user> | ||
+ | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{,3}/OK/g' | ||
+ | OK OK OK OKOK OKOK OKOKOK | ||
+ | </code> | ||
+ | |||
+ | <code user> | ||
+ | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\ | ||
+ | 's/(a{1}[[:blank:]]|a{2}[[:blank:]])/OK/g' | ||
+ | OKOKaOKaaOKaaaaOKaaaaaaaa | ||
+ | </code> | ||
+ | |||
+ | </note> | ||
+ | <code user> | ||
+ | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\ | ||
+ | -e 's/(a{1}[[:blank:]])/OK/' -e 's/(a{2}[[:blank:]])/OK/' | ||
+ | OKOKaaa aaaa aaaaaa aaaaaaaa | ||
+ | </code> | ||
+ | |||
+ | * zéro ou une fois "z" par OK | ||
+ | |||
+ | <code user> | ||
+ | echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az?bc/OK/g' | ||
+ | OK OK azzbc azzzbc azzzzbc | ||
+ | </code> | ||
+ | |||
+ | * une ou plusieurs fois "z" par OK | ||
+ | |||
+ | <code user> | ||
+ | echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az+bc/OK/g' | ||
+ | abc OK OK OK OK | ||
+ | </code> | ||
+ | |||
+ | =====Sed regexp étendues ===== | ||
+ | === le "ou" (|)=== | ||
+ | <code user> | ||
+ | sed -r 's/a|c/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | gagagagagagagaga | ||
+ | BBB | ||
+ | gagaCgagaC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi gagaCgagaC | ||
+ | </code> | ||
+ | ===Parenthèses=== | ||
+ | <code user> | ||
+ | sed -r 's/(a|B).*/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | gaga | ||
+ | gaga | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | gaga | ||
+ | titi cCcC | ||
+ | hypathie@debian:~$ | ||
+ | </code> | ||
+ | ===Les accolades === | ||
+ | <code> | ||
+ | sed 's/a{1,4}/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | aaaa | ||
+ | BBB | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | BBB | ||
+ | titi cCcC | ||
+ | </code> | ||
+ | <code user> | ||
+ | sed -r 's/(a|B).*/gaga/g' sed1.txt | ||
+ | </code> | ||
+ | <code> | ||
+ | gaga | ||
+ | gaga | ||
+ | cCcC | ||
+ | # | ||
+ | 12345 | ||
+ | gaga | ||
+ | titi cCcC | ||
+ | </code> | ||