L'icône rouge permet de télécharger chaque page du wiki visitée au format PDF et la grise au format ODT →

Différences

Ci-dessous, les différences entre deux révisions de la page.

--- utilisateurs:hypathie:tutos:accueil [19/07/2014 09:15]
Hypathie [Synthèse sur cut]
+++ utilisateurs:hypathie:tutos:accueil [21/07/2014 13:09]
Hypathie [L'adressage]
@@ Ligne 1: / Ligne 1: @@
-====== Utiliser conjointement cut ; wc ; grep ; sed ======
+====== Sed et les expressions rationnelles ======
-  * Objet : Petite synthèse cut;grep;sed
+**Objet : Apprendre à utiliser les expressions rationnelles spécifiques à sed.**
-  * Niveau requis : FIXME {{tag>débutant avisé}}
-  * Commentaires : //Contexte d'utilisation du sujet du tuto. // FIXME
-  * Débutant, à savoir : [[:doc:systeme:commandes:le_debianiste_qui_papillonne|Utiliser GNU/Linux en ligne de commande, tout commence là !.]] :-)
+  * Niveau requis : {{tag>avisé}}
+  * Commentaires : //Tuto en cours de rédaction //
-=====Synthèse  grep =====
-<code>
-grep [options] regexp [fichier...]
-</code>
-Voir : [[atelier:chantier:bash-vii-globs-etendus-regex#tableau-des-caracteres-utilises-dans-les-expressions-regulieres-etendues|caractères utilisés dans les expressions régulières étendues]]
-^       ^                                                ^
-|''-c'' |afficher le décompte des lignes correspondantes |
-|''-i'' | ignorer la case  |
-|''-E'' |utiliser les regexp étendues\\ (correspond à egrep)  |
-|''-o'' |afficher uniquement les parties (non vides) correspondantes des lignes sélectionnées, chaque partie étant affichée sur une ligne séparée.|
-> Deux utilisations:\\
+=====Sed et les regexp simples =====
->Soit ''grep [options] "expression" /chemin/fichier'' (on applique grep sur un fichier)
+====Explications====
->Soit ''cmd | grep [options]'' (on travaille à partir d'un flux d'entrée avec un filtre (pipe)\\
+===le caractère ^ ===
+Le caractère ''^'' n'est spécial qu'en début d'E.R. ou immédiatement à gauche dans une chaîne encadrée par des '[]' (voir : "les crochets").
+  * Exemple 1 : supprimer la ligne comprenant le caractère "#", du fichier :
+<code user>
+cat >> ~/sed.txt <<EOF
+> abc
+> #ABC
+> EOF
+</code>
-===Sur un fichier===
 <code user>
-grep -E "(:[0-9]{4}:){1}" /etc/passwd
+sed '/^#/ d' sed.txt
 </code>
 <code>
-hypathie:x:1000:1000:Hypathie,,,:/home/hypathie:/bin/bash
+abc
 </code>
+  * Exemple 2 : supprimer le caractère # seulement du fichier sed.txt
-===Filtre un flux d'entrée ===
 <code user>
-/sbin/ifconfig | grep -E "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"
+sed -e '/^#/s/#ABC/ABC/' sed.txt
-</code>
+</code
 <code>
-          inet adr:192.168.0.22  Bcast:192.168.0.255  Masque:255.255.255.0
+abc
-          inet adr:127.0.0.1  Masque:255.0.0.0
+ABC
 </code>
+  * Exemple 3 : ne pas supprimer le ligne qui commence par #
 <code user>
-/sbin/ifconfig | grep -oE "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"
+sed '/^#/ !d' ~/sed.txt
 </code>
 <code>
-.0.0.1
+#
-.0.0.0
-.168.0.21
-.168.0.255
-.255.255.0
 </code>
+===Le caractère $ ===
+Le caractère ''$'' représente la fin de la ligne.
+//(Le caractères ''$'' n'est spécial qu'en fin d'E.R ou d'un ensemble d'E.R.)//
-<note tip>
+  * Exemple : supprimer la ligne finissant par "C"
-Attention de ne pas oublier ''-o'' pour afficher l'occurrence exacte d'un mot au lieu de la ligne entière où figure l'occurrence du mot !
-</note>
 <code user>
-echo "bfer aaa jhgao aaaaaa haug aaaaaaaa" | grep -E "[[:blank:]][a]{3}[[:blank:]]"
+sed -e 's/.*C$//' -e '/^$/ d' sed.txt
 </code>
 <code>
-bfer aaa jhgao aaaaaa haug aaaaaaaa
+abc
 </code>
+=== le point (.)===
+ Un point ''.'' est une E.R. d'un seul caractère qui correspond à n'importe quel caractère sauf le saut de ligne.
+  * Exemple 1 :
 <code user>
-echo "bfer aaa jhgao aaaaaa haug aaaaaaaa" | grep -oE "[[:blank:]][a]{3}[[:blank:]]"
+echo "a B 2 ! * & : ?" | sed 's/./Gaga/g'
 </code>
 <code>
- aaa
+GagaGagaGagaGagaGagaGagaGagaGagaGagaGagaGagaGagaGagaGagaGaga
 </code>
-=====Synthèse sed =====
+  * Exemple 2, point<espace> :
-===Syntaxe===
+<code user>
-<code>
+echo "C " | sed 's/. /Coucou/'
-sed [options] commande [fichier...]
 </code>
-ou
 <code>
-sed [options] -f script [fichier...]
+Coucou
 </code>
-===Options===
+===L'étoile (*)===
-^options ^significations ^
+Une E.R. d'un seul caractère suivie d'un ''*'' est une E.R. qui recherche zéro occurrence ou plusieurs de ce caractère.\\
-| ''-e'' | enchaîner plusieurs commandes |
+''c*123'' -> ''123'' ou ''c123'' ou ''cc123'' ou ''ccc123'', etc.
-| ''-r'' | utiliser les expressions régulières étendues dans un script |
+<note important>
-|''-n'' |mode silencieux : permet de ne rien modifier\\ associée au drapeau p (print) : affichage sur la sortie standard |
+  * S'il y a plusieurs choix, alors la chaîne de gauche la plus longue est choisie.
-|''-f'' |Les commandes sont lues à partir d'un fichier préalablement rédigé. |
+  * La E.R ''.*'' représente zéro ou plusieurs occurrences de n'importe quel caractère.
-|''-i'' |Le fichier est édité sur place.|
+</note>
-====Afficher ou modifier un fichier ====
+===Les crochets===
->Dans les exemples qui suivent, ne considérons que la présence ou l'absence de l'option ''i''; le reste de la commande est expliqué par la suite.
+La chaîne non-vide encadrée par ''[ ]'' est considérée comme une ''E.R.'' d'un seul caractère pouvant avoir n'importe quelle valeur définie entre ces ''[]''.\\
-===sed permet d'afficher sur la sortie standard===
-  * Créer un fichier :
+À l'inverse, la E.R représentée par ''[^...]'' est une chaîne composée de tous caractères à l'exclusion de ceux encadrés.\\
-<code user>
+//( le caractère ''^'' ne spécifie cette fonctionnalité d'exclusion que s'il se trouve en première position, immédiatement après le ''['' )//
-echo "aaaa BBB cCcC # 12345" >> ~/sed1.txt
-</code>
+Une combinaison de plusieurs E.R. d'un seul caractère est une E.R. qui correspond à l'ensemble de ce que chaque E.R. désigne.\\ Par exemple ''a[bB]'' recherche ''ab'' ou ''aB''.
+<note>
+Les caractères  ''.'' , ''*'' , ''['' et ''\'' sont toujours spéciaux sauf s'ils sont encadrés entre ''[]''.
+  * ''[A-Za-z-]'' -> Tout caractère alpha ou le ''-''.
+  * ''[]a-z]'' -> Tout caractère alpha ou le '']''.
+</note>
+===Le caractère & ===
-  * Afficher le contenu d'un fichier :
 <code user>
-sed '' sed1.txt
+sed 's/[0-9][0-9]*$/[&]/' sed1.txt
-</code>
-<code>
-aaaa BBB cCcC # 12345
-</code>
-===sed permet d'afficher sa modification (sans modifier le fichier)===
-  * remplacer les espaces par des retours à la ligne :
-<code user>
-sed 's+ +\n+g' ~/sed1.txt
 </code>
 <code>
@@ Ligne 112: / Ligne 109: @@
 cCcC
 #
+[12345]
+BBB
+titi cCcC
 </code>
 <code user>
-sed '' sed1.txt
+sed 's/[0-9][0-9]*$/(&)/' sed1.txt
-</code>
-<code>
-aaaa BBB cCcC # 12345
-</code>
-=== Option -i : modifier le fichier ===
-  * sauvegarder le fichier d'origine "sed1.txt" avec ''sed -i.bak'' :
-<code user>
-sed -i.bak 's/sed1.txt//' ~/sed1.txt
-</code>
->sed n'a pas afficher sur la sortie standard le contenu du fichier de sauvegarde.
-<code user>
-cat sed1.txt.bak
-</code>
-<code>
-aaaa BBB cCcC # 12345
-</code>
-  * modifier un fichier avec ''sed -i'' :
-<code user>
-sed -i 's+ +\n+g' ~/sed1.txt
-</code>
-<code user>
-cat sed1.txt
 </code>
 <code>
@@ Ligne 146: / Ligne 121: @@
 cCcC
 #
+(12345)
+BBB
+titi cCcC
 </code>
-=== Plusieurs options à la suite===
->Les options doivent se suivre dans un ordre précis
-  * ajouter des sauts de ligne : ''sed -i -e 's/$/\\n/' ~/sed1.txt''
-  * supprimer les lignes vides : ''sed -i -e '/^$/d' ~/sed1.txt''
-====Adressage====
-<code user>
-s/motif/substitut/
-	-> si motif = une regex
-	-> alors subtitut = une chaîne de caractère
-</code>
->On peut utiliser la syntaxe habituelle, ou la syntaxe étendue avec l'option ''-r''.
-<code text info sed>
+=====Sed -r : les caractères étendues =====
-`-r'
+Rappel :
-`--regexp-extended'
-     Use extended regular expressions rather than basic regular
-     expressions.  Extended regexps are those that `egrep' accepts;
-     they can be clearer because they usually have less backslashes,
-     but are a GNU extension and hence scripts that use them are not
-     portable.  *Note Extended regular expressions: Extended regexps.
-</code>
-<note>
-Sed utilise une version particulière des expressions régulières.
-  * Sans l'option ''-r'' :
+ ''+'' ; ''?'' ; ''|'' ; ''(   )'' ; ''['' ; ''{   }''
-Sed couvre des expressions régulières de base (POSIX). Il s'agit des caractères de bases qui sont communs à tous les programmes utilisant les expressions régulières.\\ En voici un rappel :
+=== le caractère (+)===
-''*'', '','', ''^'',  ''$'', ''[ ]'', ''[^ ]'', ''\( \)'', ''\n'', ''\{n\}'', ''\{n,m\}'', ''\{n,\}''.
-  * avec ''-r'' :
+  * substituer une ou plusieurs fois "z" par OK
-Il s'y ajoute les caractères POSIX étendus :\\
+<code user>
-''|'' ; ''^'' ; ''$'' ; ''.'' ; ''*'' ; ''+'' ; ''?'' ; ''(   )'' ; ''['' ; ''{   }'' ; ''\'' ; ''[:alpha:]'', ''[:blank:]'', ''[:cntrl:]'', ''[:digit:]'', ''[:graph:]'', ''[:lower:]'', ''[:print:]'', ''[:punct:]'', ''[:space:]'', ''[:upper:]'', ''[:xdigit:]''\\
+echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az+bc/OK/g'
-Pour résumer, tous les caractères de ce tableau fonctionnent avec ''sed -r'' : [[atelier:chantier:bash-vii-globs-etendus-regex#tableau-des-caracteres-utilises-dans-les-expressions-regulieres-etendues]]
+abc OK OK OK OK
+</code>
-Il s'y ajoute enfin quelques un caractères que l'on retrouve sous Perl :\\
+=== Le caractère ( ? )===
-''\b'', ''\B'', ''\w'', ''\W'', ''\s'', ''\S'', ''\`'', ''\''', ''\<'', ''\>''
+  * substituer zéro ou une fois "z" par OK
-Ainsi que :
- ''\a'' (caractère alerte), ''\f'' (saut), ''\n'' (saut de ligne), ''\r'' (retour chariot), ''\''t (tabulation horizontale), ''\v'' (tabulation verticale), ''\cx'' (Control-x ), ''\dxxx'' (caractère en valeur ascii décimal), ''\OXXX'' (caractère par valeur aSCII octal), ''\xhh'' (caractère par valeur aSCII hexadécimal).
-</note>
-=== Syntaxe d'adressage avec exemple la commande de suppression ===
-  * ''d'' commande de suppression
 <code user>
-sed '3,4 d' ~/sed1.txt
+echo "abc azbc azzbc azzzbc azzzzbc" | sed -r 's/az?bc/OK/g'
+OK OK azzbc azzzbc azzzzbc
 </code>
-<code>
-aaaa
-BBB
-</code>
-> pas d'option : rien n'est modifié
->''d'' : commande de suppression
->''3,4'' : ligne 3 et 4
-  * option ''-e'' et répétition le commande ''d'' :
+=== Le ou ( | )===
+  * substituer  ab ou cd par OK
 <code user>
-sed -e '3d; 4d' ~/sed1.txt
+echo "abef cdef efgh abcd" | sed -r 's/ab|cd/OK/g'
+OKef OKef efgh OKOK
 </code>
-<code>
-aaaa
+  * substituer ab ou cd par OK et effacer le reste
-BBB
-</code>
-  * adressage ''/ /'' :
 <code user>
-sed '/^B/d' ~/sed1.txt
+echo "lflfabef cdef efgh ftyabcdopm" | sed -r\
+ 's/^.*[ab|cd]*/OK/g'
+OK
 </code>
-<code>
-aaaa
+===Les parenthèses ===
-cCcC
-#
-</code>
-  * adressage d'une plage ''/ /,/ /'' :
 <code user>
-sed '/^B/,/^1/d' ~/sed1.txt
+echo "a b c d e f" | sed -r 's/(b|e)/X/g'
 </code>
 <code>
-aaaa
+a X c d X f
 </code>
-====La substitution ====
-===Syntaxe===
+===Parenthèses et inversion de champs===
-<code>
+Avec la commande ''s'' (substitution), on peut de définir plusieurs E.R mises entre parenthèses.\\
-s/modèle/remplacement/[drapeau] fichier
+Cela permet de faire une inversion en se servant du séparateur de chaque champ à matcher.\\
-</code>
-ou
+  * Exemple :
-<code>
-cmd | s/modèle/remplacement/[drapeau]
-</code>
-===Les drapeaux===
-^  ^  ^
-|g | global : toutes les occurrences |
-|1, 2, etc. | un nombre : la nième occurrence |
-|w | écrire les modifications effectuées dans un fichier |
-|p | afficher la ligne modifiée |
-|e | exécution d'une commande |
-===Sans drapeau : première occurrence de chaque ligne===
 <code user>
-sed 's/C/c/' ~/sed1.txt
+echo "coucou:toto" | sed -r 's/^(.*):(.*)/\2:\1/'
 </code>
 <code>
-aaaa
+toto:coucou
-BBB
-cccC
-#
 </code>
-===Drapeau nombre ===
+<note tip>
+/^\(.*\)\1$/ : correspond à une ligne contenant au moins deux fois la même sous-chaîne de caractères
+</note>
+===Les accolades { et } ===
+Un seul caractère suivie par ''{m}'', ''{m,}'', ou ''{m,n}'' est une E.R. qui correspond au caractère précédant ''{'' s'il est présent, exactement m fois (''m''); au moins m fois (''m,''); entre "m" et "n" fois (''m,n'').\\
+'m' et 'n' doivent être des entiers positifs ou nuls inférieurs à 256.
+   * substituer seulement "aaa, aaaa et aaaaa" par OK
 <code user>
-sed 's/C/c/2' ~/sed1.txt
+echo "a aa aaa aaaa aaaaaa aaaaaaaa aaaaaaa" | sed -r\
+ 's/a{3,5}/OK/g'
+a aa OK OK OKa OKOK OKaa
 </code>
-<code>
-aaaa
+  * substituer trois "a" et plus par OK
-BBB
-cCcc
-#
-</code>
-=== Drapeau w===
 <code user>
-sed "s/12345/6789/w sed1-modif" ~/sed1.txt
+echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{3,}/OK/g'
+a aa OK OK OK OK
 </code>
+===Traitement des mots ===
+  * le caractère ''\<''
+Le caractère ''\<'' oblige l'E.R. à correspondre avec le début d'un mot (mot = chaîne de caractères chiffres, lettres ou '_').\\ ''\<'' doit figurer devant la sous-chaîne désirée.
 <code user>
-cat ~/sed1.txt
+echo "info pour tous informatique" | sed -r 's/\<info/OK/g'
 </code>
 <code>
+OK pour tous OKrmatique
 </code>
-===Deux drapeaux===
+  * le caractère  ''\>''
+Le caractère  ''\>'' oblige l'E.R. à correspondre à la fin d'un mot.\\ ''\>'' doit figurer en fin de la sous-chaîne désirée.
 <code user>
-sed 's/C/c/gw modif-sed1.txt' ~/sed1.txt
+echo "métrique cosmétique" | sed -r 's/métique\>/OK/g'
 </code>
+<code>
-<code user>
+métrique cosOK
-aaaa
-BBB
-cccc
-#
 </code>
-<code>
+====Les sous-chaînes : associer ( ), [ ], { }====
-cccc
+  * substituer "Hello" par OK
-</code>
-===Drapeau p===
->Avec l'option ''-n'' pour éviter les doublons, on utilise le drapeau p ;
->En effet, on a vu que pour chaque modification, tout le texte est affiché.
-> drapeau p : il affiche le texte modifié, puis il applique le drapeau, donc affiche ce qui les lignes modifiées.
->Grâce ''-n'', on n'affiche pas ce qui est modifié.
->''-n'' + drapeau p : on affiche que ce qui a été modifié
 <code user>
-sed -n 's/12345/6789/p' ~/sed1.txt
+echo "coucou Hello Yep" | sed -r 's/[A-Z]{1}[a-z]{4}/OK/g'
 </code>
 <code>
+coucou OK Yep
 </code>
-===Drapeau e===
+  * substituer "ABC-123 abc-123" par OK
->Utilisation de la sortie d'une commande comme chaîne de remplacement.
 <code user>
-sed 's/^#/date/e' ~/sed1.txt
+echo "ABC-123 abc-123" | sed -r 's/[A-Z]{3}-[[:digit:]]{3}\
+ [[a-z]{3}-[[:digit:]]{3}/OK/'
+OK
 </code>
+<note tip>
+SHELL : ''\''\\
+-> Les longues commandes peuvent être sectionnées avec :\\
+  \<retour à la ligne>[<espace>]
+</note>
+  * substituer "ab efab ef" par OK
 <code user>
-cat ~/sed1.txt
+echo "123ab efab ef123" | sed -r 's/(ab[[:blank:]]ef){2}/OK/'
+OK123
 </code>
-<code>
+  * substituer "123ab efab ef123" par trois "OK"
-aaaa
-BBB
-cCcC
-mardi 15 juillet 2014, 11:48:27 (UTC+0200)
-</code>
-==== sed et variables ====
 <code user>
-VAR="coucou"
+echo "123ab efab ef123" | sed -r -e 's/(ab[[:blank:]]ef){2}/OK/g'\
+ -e 's/[[:digit:]]{3}/OK/g'
+OKOKOK
 </code>
+  * substituer jusqu'à trois "a" par OK
+<note tip>
+Attention !\\ La E.R ''{,m}'' n'est pas utilisée avec sed.\\ Les chaînes comportant plus de trois "a" contiennent aussi moins de trois "a" !
 <code user>
-export VAR
+echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r 's/a{,3}/OK/g'
+OK OK OK OKOK OKOK OKOKOK
 </code>
 <code user>
-sed 's/^#/echo '$VAR'/e' ~/sed1.txt
+echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\
+ 's/(a{1}[[:blank:]]|a{2}[[:blank:]])/OK/g'
+OKOKaOKaaOKaaaaOKaaaaaaaa
 </code>
+</note>
-<code>
+<code user>
-aaaa
+echo "a aa aaa aaaa aaaaaa aaaaaaaa" | sed -r\
-BBB
+ -e 's/(a{1}[[:blank:]])/OK/' -e 's/(a{2}[[:blank:]])/OK/'
-cCcC
+OKOKaaa aaaa aaaaaa aaaaaaaa
-coucou
 </code>
-====Quelques autres commandes de sed====
-^  ^                       ^
-|d |supprimer  |
-|q |quitter |
-|p | afficher avec ''-n'' |
-|i\texte |insérer du texte|
-|a\texte |ajouter du texte |
-|c\texte |remplacer du texte |
-| = | afficher |
-=====Associer sed et les autres commandes =====

Debian-facile

Différences

Pied de page des forums