wiki - Sed Un éditeur puissant en ligne de commande

smolski · 24-04-2010 13:46:59

Hop ! C'est là :
http://debian-facile.org/doc:systeme:sed

Tchibâââ !

RUFUS · 24-04-2010 19:35:12

sed super !!!

merci popo smolski

guilhem91 · 25-04-2010 14:28:45

Tiens, j'ai appris une commande aujourd'hui... Et utile en plus !

Merci Smolski

smolski · 08-07-2010 11:20:24

Après considération du tuto de sed, le voici agrémenté de nouvelles explications et d'exemples concrets rendant plus "facile" la compréhension et l'usage de cette commande importante.

Ça reste du niveau très avisé, mais ce serait dommage de s'en passer tout de même.

Amitié, Jojo

smolski · 23-05-2013 15:55:58

Hop !

Un petit ajout concernant l'utilisation du point dans la commande sed :
sed et le point. C'est là !

smolski · 08-10-2013 07:49:38

enicar a écrit :

Bonjour,

J'ai repéré l'erreur suivante dans ce tutoriel :
dans le paragraphe : « sed et les sous-chaînes » la commande sed contient des espaces superflus :
sed -e "s/\ ([0-9][0-9]*\ )/aa\ 1aa/" <fichier>

alors que l'on devrait avoir :
sed -e "s/\([0-9][0-9]*\)/aa\1aa/" <fichier>

Merci enicar, c'est rectifié !

Hypathie · 20-07-2014 17:22:12

Bonjour,
excusez-moi, je ne suis pas trop sûre, mais il semble qu'il y ait une erreur.

Paragraphe substitution, au niveau du deuxième exemple :

sed "s/toto/TOTO/2" test1.txt

sur le fichier

toto et titi aiment les abricots.

toto préfère les Fraises.

titi les cerises.

TOTo et TITI sont des chipoteurs du jardin.

Ne semble pas pouvoir changer la deuxième occurrence de toto en TOTO.

L'adressage chiffré devant être placé devant les commandes, c'est peut-être un mauvais couper/coller qui a peut-être remplacé cela :

sed -n "2s/toto/TOTO/p" test1.txt

TOTO préfère les Fraises.

smolski · 20-07-2014 17:31:30

Ok corrige le tuto Hypathie, si la ligne inscrite ne fonctionne pas.

captnfab · 20-07-2014 19:01:12

Non, pas d'erreur.
Le 2 signifie la 2e occurrence sur la ligne. Il n'y a pas de ligne avec deux « toto », donc pas de substitution possible.

smolski · 20-07-2014 19:15:01

Effectivement, cependant le tuto ainsi rédigé me semble plus conforme dans l'intention à ce qu'il était avant.

captnfab · 20-07-2014 19:16:56

Ben, sauf que maintenant le tuto n'explique plus comment supprimer la 2e occurrence d'un terme (sur chaque ligne). Bien qu'avant il l'expliquait peut-être de manière erronée.

smolski · 20-07-2014 19:37:02

voilà de manière érronée, y faudrait rajouter l'exemple en le mettant efficacement

captnfab · 20-07-2014 19:38:42

+1

Hypathie · 21-07-2014 00:10:13

coucou captnfab

bah en dessous de l'exemple il est écrit

va changer la seconde occurence de la chaîne toto par TOTO (uniquement la seconde chaîne toto rencontrée dans le texte)

Hypathie · 21-07-2014 00:22:42

yep

dans mes brouillons sur les E.R., j'ai Adressage avec n° d'occurrence.

j'peux mettre un lien si vous voulez ?

captnfab · 21-07-2014 08:06:51

Plop,

Tu peux aussi changer la ligne pour remplacer la 2e occurrence non pas de toto mais to

C'est important de voir que c'est la 2e de la ligne et non pas la 2e du texte.

Au passage, je pense qu'il vaut mieux éviter au maximum les liens vers les tutos persos, en tout cas pour les choses fondamentales.
Les tutos perso ne sont maintenus/relus que par leur propriétaire. Donc ils conviennent mieux pour des choses éphémères ou des cas d'utilisations très particuliers (et donc les liens vers eux sont à préférer dans ce contexte d'utilisation).

smolski · 21-07-2014 09:11:31

Ajout dans la commande de substitution s l'exemple pour changer une seule occurence située dans le texte en la situant.

milou · 20-04-2015 17:24:09

Mise en conformité de l'en-tête.
Suppression de la ligne nota Fixme

phlinux · 12-03-2016 13:29:35

Bjr,
Il existe un éditeur du même acabit qui se nomme ssed et qui fournit des options plus étendues. Puis-je mettre un lien vers un exemple de ce sed amélioré ?

smolski · 12-03-2016 14:35:37

Ah oui !

phlinux · 12-03-2016 15:08:19

Voilà, mis un lien en bas de page. Peut être faudrat-il écrire une petite ligne dans le corps de la page.
Reste aussi à ce que les barbus de service vérifient que sed ne fait pas par lui même ce que phlinux demande à ssed.
Je reste à disposition pour expliciter le besoin que j'en eus.

smolski · 12-03-2016 17:11:02

je serai pour un tuto spécifique à ssed plutôt qu'un emplâtre dans sed...

phlinux · 12-03-2016 21:02:07

Ouais, bon on sait qu'il existe au cas où

Croutons · 25-01-2021 14:29:35

Salut
j'ai mis une petite note pour préciser que l'option -e ne modifie pas le fichier mais affiche seulement sur l'entrée standard

cyrille · 25-01-2021 21:05:24

Bonsoir, en lisant ce how to bien fait et synthétique, je me propose de le compléter par un cas concret auquel j'ai répondu sur le forum. Par contre, je n'ai pas osé écrire directement dans la page du wiki ne sachant si c'était une pratique courante ou non. DOnc ça concerne la dernière partie relative au sous chaine. Je propose un cas concret avec de multiples sous chaines. Si ça te dit, tu peux compléter ta page avec si non tant pis

==============================================Exemple de parsing d'un fichier avec SED (avec des sous chaines multiples)

Imaginons un fichier html avec des entrées
- référence 1 : 6 lettres en capitales
- étagère : "ETAGERE" + 2 chiffres
- référence 2 : suite de 6 chiffres
- référence de la boite : BOX + 2 chiffres
- référence de l'unité de stockage : UNITE + 1 lettre en capitale

<html>

<body>Exemple avec SED</body>

<p>VOici un exemple</p>

<h1>Stockage BATIMENT 1</h1>

<h2>ABCDEF</h2><label class="tel" title="ETAGERE34">12345678</label><p><br>BOX06<br>UNITEA</p>

<h3>

<h2>ZERDEF</h2><label class="tel" title="ETAGERE04">88888888</label><p><br>BOX12<br>UNITER</p>

<h3>Description d'autre chose</h3>

<p>Une description et du blablabla</p>

<p><b><i>Juste pour remplir</i></b><p>

.....

<h2>UYRDEF</h2><label class="tel" title="ETAGERE12">87654321</label><p><br>BOX65<br>UNITEZ</p>

</body>

</html>

Imaginez des centaines de pages de ce type et votre mission, récupérer les valeurs des 5 champs pour les mettre dans un tableur. Un travail titanesque à la main...

Pour cela utiliser, sed et les sous-chaines.

- ^<h2> : Ne travailler qu'avec les lignes commençant par la balises <h2>
- [A-Z]{6} : pour le 1er motif de recherche 6 lettres en capitales
- .* : n'importe quoi jusqu'au prochain motif
- ETAGERE[0-9]{2} : le terme ETAGERE suivi de 2 chiffres
- .* : n'importe quoi jusqu'au prochain motif
- [0-9]{8} : une suite de 8 chiffres
- .* : n'importe quoi jusqu'au prochain motif
- BOX[0-9]{2} : le terme BOX suivi de 2 chiffres
- .* : n'importe quoi jusqu'au prochain motif
- [A-Z]{6} : une suite de 6 lettres en capitales
- .* : n'importe quoi jusqu'à la fin de la ligne

Voilà pour les expressions régulières (regex). Pour les rendre compréhensibles par sed, il faudra "échapper" (\) les caractères {, }, ( et ) afin qu'ils ne soient pas considérés comme un élément d'une chaine de caractère mais comme un élément d'une expression régulière.

Ce qui donnera comme regex

^<h2>\([A-Z]\{6\}\).*\(ETAGERE[0-9]\{2\}\).*\([0-9]\{8\}\).*\(BOX[0-9]\{2\}\).*\([A-Z]\{6\}\).*

Tout est bien beau, mais comment virer le code HTML et le blablabla ? En entourant chaque motif de recherche par des parenthèses tout simplement et en rappelant ces extractions par \1 pour la première, \2 pour la seconde et ainsi de suite

- le premier motif \1
- le second : \2
- le 3e : \3
- Et ainsi de suite

Comme c'est pour un tableur, nous passerons par un fichier CSV. Il suffit donc de récupérer les motifs et de les séparer par un point virgule

\1;\2;\3;\4;\5;

Et comme il s'agit d'une substitution, on utilisera l'option -s de sed

Donc au final :

 sed -n 's/<h2>\([A-Z]\{6\}\).*\(ETAGERE[0-9]\{2\}\).*\([0-9]\{8\}\).*\(BOX[0-9]\{2\}\).*\([A-Z]\{6\}\).*/\1;\2;\3;\4;\5;/p' mon-fichier-entree.html

QUi retournera

$  sed -n 's/<h2>\([A-Z]\{6\}\).*\(ETAGERE[0-9]\{2\}\).*\([0-9]\{8\}\).*\(BOX[0-9]\{2\}\).*\([A-Z]\{6\}\).*/\1;\2;\3;\4;\5;/p' test.html               

ABCDEF;ETAGERE34;12345678;BOX06;UNITEA;

ZERDEF;ETAGERE04;88888888;BOX12;UNITER;

UYRDEF;ETAGERE12;87654321;BOX65;UNITEZ;

Si vous voulez créer un fichier csv, simplement rediriger la sortie du terminal > sortie.csv
Si le fichier doit être incrémenté par la lecture de plusieurs sources, utiliser >> à la place de > afin de ne pas écraser le fichier existant mais le compléter.

Enjoy

Dernière modification par cyrille (25-01-2021 21:08:45)

Debian-facile

#1 24-04-2010 13:46:59

wiki - Sed Un éditeur puissant en ligne de commande

#2 24-04-2010 19:35:12

Re : wiki - Sed Un éditeur puissant en ligne de commande

#3 25-04-2010 14:28:45

Re : wiki - Sed Un éditeur puissant en ligne de commande

#4 08-07-2010 11:20:24

Re : wiki - Sed Un éditeur puissant en ligne de commande

#5 23-05-2013 15:55:58

Re : wiki - Sed Un éditeur puissant en ligne de commande

#6 08-10-2013 07:49:38

Re : wiki - Sed Un éditeur puissant en ligne de commande

#7 20-07-2014 17:22:12

Re : wiki - Sed Un éditeur puissant en ligne de commande

#8 20-07-2014 17:31:30

Re : wiki - Sed Un éditeur puissant en ligne de commande

#9 20-07-2014 19:01:12

Re : wiki - Sed Un éditeur puissant en ligne de commande

#10 20-07-2014 19:15:01

Re : wiki - Sed Un éditeur puissant en ligne de commande

#11 20-07-2014 19:16:56

Re : wiki - Sed Un éditeur puissant en ligne de commande

#12 20-07-2014 19:37:02

Re : wiki - Sed Un éditeur puissant en ligne de commande

#13 20-07-2014 19:38:42

Re : wiki - Sed Un éditeur puissant en ligne de commande

#14 21-07-2014 00:10:13

Re : wiki - Sed Un éditeur puissant en ligne de commande

#15 21-07-2014 00:22:42

Re : wiki - Sed Un éditeur puissant en ligne de commande

#16 21-07-2014 08:06:51

Re : wiki - Sed Un éditeur puissant en ligne de commande

#17 21-07-2014 09:11:31

Re : wiki - Sed Un éditeur puissant en ligne de commande

#18 20-04-2015 17:24:09

Re : wiki - Sed Un éditeur puissant en ligne de commande

#19 12-03-2016 13:29:35

Re : wiki - Sed Un éditeur puissant en ligne de commande

#20 12-03-2016 14:35:37

Re : wiki - Sed Un éditeur puissant en ligne de commande

#21 12-03-2016 15:08:19

Re : wiki - Sed Un éditeur puissant en ligne de commande

#22 12-03-2016 17:11:02

Re : wiki - Sed Un éditeur puissant en ligne de commande

#23 12-03-2016 21:02:07

Re : wiki - Sed Un éditeur puissant en ligne de commande

#24 25-01-2021 14:29:35

Re : wiki - Sed Un éditeur puissant en ligne de commande

#25 25-01-2021 21:05:24

Re : wiki - Sed Un éditeur puissant en ligne de commande

Pied de page des forums