Vous n'êtes pas identifié(e).
L'icône rouge permet de télécharger chaque page du wiki visitée au format PDF et la grise au format ODT →
Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente Prochaine révision Les deux révisions suivantes | ||
utilisateurs:hypathie:tutos:accueil [19/07/2014 09:16] Hypathie [Synthèse grep] |
utilisateurs:hypathie:tutos:accueil [21/07/2014 13:09] Hypathie [Sed et les regexp simples] |
||
---|---|---|---|
Ligne 1: | Ligne 1: | ||
- | ====== Utiliser conjointement cut ; wc ; grep ; sed ====== | + | ====== Sed et les expressions rationnelles ====== |
- | * Objet : Petite synthèse cut;grep;sed | + | **Objet : Apprendre à utiliser les expressions rationnelles spécifiques à sed.** |
- | * Niveau requis : FIXME {{tag>débutant avisé}} | + | |
- | * Commentaires : //Contexte d'utilisation du sujet du tuto. // FIXME | + | |
- | * Débutant, à savoir : [[:doc:systeme:commandes:le_debianiste_qui_papillonne|Utiliser GNU/Linux en ligne de commande, tout commence là !.]] :-) | + | |
+ | * Niveau requis : {{tag>avisé}} | ||
+ | * Commentaires : //Tuto en cours de rédaction // | ||
- | =====Synthèse sed ===== | ||
- | ===Syntaxe=== | ||
- | <code> | ||
- | sed [options] commande [fichier...] | ||
- | </code> | ||
- | ou | ||
- | <code> | ||
- | sed [options] -f script [fichier...] | ||
- | </code> | ||
- | ===Options=== | ||
- | ^options ^significations ^ | ||
- | | ''-e'' | enchaîner plusieurs commandes | | ||
- | | ''-r'' | utiliser les expressions régulières étendues dans un script | | ||
- | |''-n'' |mode silencieux : permet de ne rien modifier\\ associée au drapeau p (print) : affichage sur la sortie standard | | ||
- | |''-f'' |Les commandes sont lues à partir d'un fichier préalablement rédigé. | | ||
- | |''-i'' |Le fichier est édité sur place.| | ||
- | ====Afficher ou modifier un fichier ==== | + | |
- | >Dans les exemples qui suivent, ne considérons que la présence ou l'absence de l'option ''i''; le reste de la commande est expliqué par la suite. | + | |
- | ===sed permet d'afficher sur la sortie standard=== | + | =====Sed -r : les caractères étendues ===== |
- | * Créer un fichier : | + | Rappel : |
+ | |||
+ | ''+'' ; ''?'' ; ''|'' ; ''( )'' ; ''['' ; ''{ }'' | ||
+ | |||
+ | === le caractère (+)=== | ||
+ | |||
+ | * substituer une ou plusieurs fois "z" par OK | ||
<code user> | <code user> | ||
- | echo "aaaa BBB cCcC # 12345" >> ~/sed1.txt | + | echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az+bc/OK/g' |
+ | abc OK OK OK OK | ||
</code> | </code> | ||
- | * Afficher le contenu d'un fichier : | + | === Le caractère ( ? )=== |
+ | |||
+ | * substituer zéro ou une fois "z" par OK | ||
<code user> | <code user> | ||
- | sed '' sed1.txt | + | echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az?bc/OK/g' |
+ | OK OK azzbc azzzbc azzzzbc | ||
</code> | </code> | ||
- | <code> | + | |
- | aaaa BBB cCcC # 12345 | + | === Le ou ( | )=== |
- | </code> | + | |
- | ===sed permet d'afficher sa modification (sans modifier le fichier)=== | + | * substituer ab ou cd par OK |
- | * remplacer les espaces par des retours à la ligne : | + | |
<code user> | <code user> | ||
- | sed 's+ +\n+g' ~/sed1.txt | + | echo "abef cdef efgh abcd" | sed -r 's/ab|cd/OK/g' |
- | </code> | + | OKef OKef efgh OKOK |
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | cCcC | + | |
- | # | + | |
- | 12345 | + | |
</code> | </code> | ||
+ | |||
+ | * substituer ab ou cd par OK et effacer le reste | ||
<code user> | <code user> | ||
- | sed '' sed1.txt | + | echo "lflfabef cdef efgh ftyabcdopm" | sed -r\ |
+ | 's/^.*[ab|cd]*/OK/g' | ||
+ | OK | ||
</code> | </code> | ||
- | <code> | ||
- | aaaa BBB cCcC # 12345 | ||
- | </code> | ||
- | === Option -i : modifier le fichier === | ||
- | * sauvegarder le fichier d'origine "sed1.txt" avec ''sed -i.bak'' : | + | ===Les parenthèses === |
<code user> | <code user> | ||
- | sed -i.bak 's/sed1.txt//' ~/sed1.txt | + | echo "a b c d e f" | sed -r 's/(b|e)/X/g' |
- | </code> | + | |
- | >sed n'a pas afficher sur la sortie standard le contenu du fichier de sauvegarde. | + | |
- | <code user> | + | |
- | cat sed1.txt.bak | + | |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa BBB cCcC # 12345 | + | a X c d X f |
</code> | </code> | ||
- | * modifier un fichier avec ''sed -i'' : | + | |
+ | ===Parenthèses et inversion de champs=== | ||
+ | Avec la commande ''s'' (substitution), on peut de définir plusieurs E.R mises entre parenthèses.\\ | ||
+ | Cela permet de faire une inversion en se servant du séparateur de chaque champ à matcher.\\ | ||
+ | |||
+ | * Exemple : | ||
<code user> | <code user> | ||
- | sed -i 's+ +\n+g' ~/sed1.txt | + | echo "coucou:toto" | sed -r 's/^(.*):(.*)/\2:\1/' |
- | </code> | + | |
- | <code user> | + | |
- | cat sed1.txt | + | |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa | + | toto:coucou |
- | BBB | + | |
- | cCcC | + | |
- | # | + | |
- | 12345 | + | |
</code> | </code> | ||
- | === Plusieurs options à la suite=== | ||
- | >Les options doivent se suivre dans un ordre précis | ||
- | * ajouter des sauts de ligne : ''sed -i -e 's/$/\\n/' ~/sed1.txt'' | + | <note tip> |
- | * supprimer les lignes vides : ''sed -i -e '/^$/d' ~/sed1.txt'' | + | /^\(.*\)\1$/ : correspond à une ligne contenant au moins deux fois la même sous-chaîne de caractères |
+ | </note> | ||
+ | |||
+ | ===Les accolades { et } === | ||
+ | Un seul caractère suivie par ''{m}'', ''{m,}'', ou ''{m,n}'' est une E.R. qui correspond au caractère précédant ''{'' s'il est présent, exactement m fois (''m''); au moins m fois (''m,''); entre "m" et "n" fois (''m,n'').\\ | ||
+ | 'm' et 'n' doivent être des entiers positifs ou nuls inférieurs à 256. | ||
- | ====Adressage==== | + | * substituer seulement "aaa, aaaa et aaaaa" par OK |
<code user> | <code user> | ||
- | s/motif/substitut/ | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa aaaaaaa" | sed -r\ |
- | -> si motif = une regex | + | 's/a{3,5}/OK/g' |
- | -> alors subtitut = une chaîne de caractère | + | a aa OK OK OKa OKOK OKaa |
</code> | </code> | ||
- | >On peut utiliser la syntaxe habituelle, ou la syntaxe étendue avec l'option ''-r''. | ||
- | <code text info sed> | + | * substituer trois "a" et plus par OK |
- | `-r' | + | |
- | `--regexp-extended' | + | |
- | Use extended regular expressions rather than basic regular | + | |
- | expressions. Extended regexps are those that `egrep' accepts; | + | |
- | they can be clearer because they usually have less backslashes, | + | |
- | but are a GNU extension and hence scripts that use them are not | + | |
- | portable. *Note Extended regular expressions: Extended regexps. | + | |
- | </code> | + | |
- | <note> | + | |
- | Sed utilise une version particulière des expressions régulières. | + | |
- | * Sans l'option ''-r'' : | ||
- | |||
- | Sed couvre des expressions régulières de base (POSIX). Il s'agit des caractères de bases qui sont communs à tous les programmes utilisant les expressions régulières.\\ En voici un rappel : | ||
- | ''*'', '','', ''^'', ''$'', ''[ ]'', ''[^ ]'', ''\( \)'', ''\n'', ''\{n\}'', ''\{n,m\}'', ''\{n,\}''. | ||
- | |||
- | * avec ''-r'' : | ||
- | |||
- | Il s'y ajoute les caractères POSIX étendus :\\ | ||
- | ''|'' ; ''^'' ; ''$'' ; ''.'' ; ''*'' ; ''+'' ; ''?'' ; ''( )'' ; ''['' ; ''{ }'' ; ''\'' ; ''[:alpha:]'', ''[:blank:]'', ''[:cntrl:]'', ''[:digit:]'', ''[:graph:]'', ''[:lower:]'', ''[:print:]'', ''[:punct:]'', ''[:space:]'', ''[:upper:]'', ''[:xdigit:]''\\ | ||
- | Pour résumer, tous les caractères de ce tableau fonctionnent avec ''sed -r'' : [[atelier:chantier:bash-vii-globs-etendus-regex#tableau-des-caracteres-utilises-dans-les-expressions-regulieres-etendues]] | ||
- | |||
- | Il s'y ajoute enfin quelques un caractères que l'on retrouve sous Perl :\\ | ||
- | ''\b'', ''\B'', ''\w'', ''\W'', ''\s'', ''\S'', ''\`'', ''\''', ''\<'', ''\>'' | ||
- | |||
- | Ainsi que : | ||
- | ''\a'' (caractère alerte), ''\f'' (saut), ''\n'' (saut de ligne), ''\r'' (retour chariot), ''\''t (tabulation horizontale), ''\v'' (tabulation verticale), ''\cx'' (Control-x ), ''\dxxx'' (caractère en valeur ascii décimal), ''\OXXX'' (caractère par valeur aSCII octal), ''\xhh'' (caractère par valeur aSCII hexadécimal). | ||
- | </note> | ||
- | === Syntaxe d'adressage avec exemple la commande de suppression === | ||
- | * ''d'' commande de suppression | ||
<code user> | <code user> | ||
- | sed '3,4 d' ~/sed1.txt | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{3,}/OK/g' |
+ | a aa OK OK OK OK | ||
</code> | </code> | ||
- | <code> | ||
- | aaaa | ||
- | BBB | ||
- | 12345 | ||
- | </code> | ||
- | > pas d'option : rien n'est modifié | ||
- | >''d'' : commande de suppression | ||
- | >''3,4'' : ligne 3 et 4 | ||
- | * option ''-e'' et répétition le commande ''d'' : | + | ===Traitement des mots === |
+ | * le caractère ''\<'' | ||
+ | Le caractère ''\<'' oblige l'E.R. à correspondre avec le début d'un mot (mot = chaîne de caractères chiffres, lettres ou '_').\\ ''\<'' doit figurer devant la sous-chaîne désirée. | ||
<code user> | <code user> | ||
- | sed -e '3d; 4d' ~/sed1.txt | + | echo "info pour tous informatique" | sed -r 's/\<info/OK/g' |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa | + | OK pour tous OKrmatique |
- | BBB | + | |
- | 12345 | + | |
</code> | </code> | ||
- | * adressage ''/ /'' : | + | |
+ | * le caractère ''\>'' | ||
+ | Le caractère ''\>'' oblige l'E.R. à correspondre à la fin d'un mot.\\ ''\>'' doit figurer en fin de la sous-chaîne désirée. | ||
<code user> | <code user> | ||
- | sed '/^B/d' ~/sed1.txt | + | echo "métrique cosmétique" | sed -r 's/métique\>/OK/g' |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa | + | métrique cosOK |
- | cCcC | + | |
- | # | + | |
- | 12345 | + | |
- | </code> | + | |
- | * adressage d'une plage ''/ /,/ /'' : | + | |
- | <code user> | + | |
- | sed '/^B/,/^1/d' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | </code> | + | |
- | ====La substitution ==== | + | |
- | ===Syntaxe=== | + | |
- | <code> | + | |
- | s/modèle/remplacement/[drapeau] fichier | + | |
- | </code> | + | |
- | ou | + | |
- | <code> | + | |
- | cmd | s/modèle/remplacement/[drapeau] | + | |
- | </code> | + | |
- | ===Les drapeaux=== | + | |
- | ^ ^ ^ | + | |
- | |g | global : toutes les occurrences | | + | |
- | |1, 2, etc. | un nombre : la nième occurrence | | + | |
- | |w | écrire les modifications effectuées dans un fichier | | + | |
- | |p | afficher la ligne modifiée | | + | |
- | |e | exécution d'une commande | | + | |
- | ===Sans drapeau : première occurrence de chaque ligne=== | + | |
- | <code user> | + | |
- | sed 's/C/c/' ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | cccC | + | |
- | # | + | |
- | 12345 | + | |
</code> | </code> | ||
- | ===Drapeau nombre === | + | ====Les sous-chaînes : associer ( ), [ ], { }==== |
+ | * substituer "Hello" par OK | ||
<code user> | <code user> | ||
- | sed 's/C/c/2' ~/sed1.txt | + | echo "coucou Hello Yep" | sed -r 's/[A-Z]{1}[a-z]{4}/OK/g' |
</code> | </code> | ||
<code> | <code> | ||
- | aaaa | + | coucou OK Yep |
- | BBB | + | |
- | cCcc | + | |
- | # | + | |
- | 12345 | + | |
- | </code> | + | |
- | === Drapeau w=== | + | |
- | <code user> | + | |
- | sed "s/12345/6789/w sed1-modif" ~/sed1.txt | + | |
- | </code> | + | |
- | <code user> | + | |
- | cat ~/sed1.txt | + | |
- | </code> | + | |
- | <code> | + | |
- | 6789 | + | |
</code> | </code> | ||
- | ===Deux drapeaux=== | + | * substituer "ABC-123 abc-123" par OK |
- | <code user> | + | |
- | sed 's/C/c/gw modif-sed1.txt' ~/sed1.txt | + | |
- | </code> | + | |
<code user> | <code user> | ||
- | aaaa | + | echo "ABC-123 abc-123" | sed -r 's/[A-Z]{3}-[[:digit:]]{3}\ |
- | BBB | + | [[a-z]{3}-[[:digit:]]{3}/OK/' |
- | cccc | + | OK |
- | # | + | |
- | 12345 | + | |
</code> | </code> | ||
- | <code> | + | <note tip> |
- | cccc | + | SHELL : ''\''\\ |
- | </code> | + | |
- | ===Drapeau p=== | + | -> Les longues commandes peuvent être sectionnées avec :\\ |
- | >Avec l'option ''-n'' pour éviter les doublons, on utilise le drapeau p ; | + | |
- | >En effet, on a vu que pour chaque modification, tout le texte est affiché. | + | \<retour à la ligne>[<espace>] |
- | > drapeau p : il affiche le texte modifié, puis il applique le drapeau, donc affiche ce qui les lignes modifiées. | + | |
- | >Grâce ''-n'', on n'affiche pas ce qui est modifié. | + | </note> |
- | >''-n'' + drapeau p : on affiche que ce qui a été modifié | + | |
+ | * substituer "ab efab ef" par OK | ||
<code user> | <code user> | ||
- | sed -n 's/12345/6789/p' ~/sed1.txt | + | echo "123ab efab ef123" | sed -r 's/(ab[[:blank:]]ef){2}/OK/' |
- | </code> | + | 123OK123 |
- | <code> | + | |
- | 6789 | + | |
</code> | </code> | ||
- | ===Drapeau e=== | + | * substituer "123ab efab ef123" par trois "OK" |
- | >Utilisation de la sortie d'une commande comme chaîne de remplacement. | + | |
<code user> | <code user> | ||
- | sed 's/^#/date/e' ~/sed1.txt | + | echo "123ab efab ef123" | sed -r -e 's/(ab[[:blank:]]ef){2}/OK/g'\ |
+ | -e 's/[[:digit:]]{3}/OK/g' | ||
+ | OKOKOK | ||
</code> | </code> | ||
+ | * substituer jusqu'à trois "a" par OK | ||
+ | <note tip> | ||
+ | Attention !\\ La E.R ''{,m}'' n'est pas utilisée avec sed.\\ Les chaînes comportant plus de trois "a" contiennent aussi moins de trois "a" ! | ||
<code user> | <code user> | ||
- | cat ~/sed1.txt | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{,3}/OK/g' |
- | </code> | + | OK OK OK OKOK OKOK OKOKOK |
- | <code> | + | |
- | 6789 | + | |
- | aaaa | + | |
- | BBB | + | |
- | cCcC | + | |
- | mardi 15 juillet 2014, 11:48:27 (UTC+0200) | + | |
- | 12345 | + | |
- | </code> | + | |
- | ==== sed et variables ==== | + | |
- | <code user> | + | |
- | VAR="coucou" | + | |
</code> | </code> | ||
<code user> | <code user> | ||
- | export VAR | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\ |
+ | 's/(a{1}[[:blank:]]|a{2}[[:blank:]])/OK/g' | ||
+ | OKOKaOKaaOKaaaaOKaaaaaaaa | ||
</code> | </code> | ||
+ | </note> | ||
<code user> | <code user> | ||
- | sed 's/^#/echo '$VAR'/e' ~/sed1.txt | + | echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\ |
- | </code> | + | -e 's/(a{1}[[:blank:]])/OK/' -e 's/(a{2}[[:blank:]])/OK/' |
- | + | OKOKaaa aaaa aaaaaa aaaaaaaa | |
- | <code> | + | |
- | aaaa | + | |
- | BBB | + | |
- | cCcC | + | |
- | coucou | + | |
- | 12345 | + | |
</code> | </code> | ||
- | ====Quelques autres commandes de sed==== | ||
- | ^ ^ ^ | ||
- | |d |supprimer | | ||
- | |q |quitter | | ||
- | |p | afficher avec ''-n'' | | ||
- | |i\texte |insérer du texte| | ||
- | |a\texte |ajouter du texte | | ||
- | |c\texte |remplacer du texte | | ||
- | | = | afficher | | ||
- | =====Associer sed et les autres commandes ===== | ||