Debian-facile

• Objet : premier volet de la série de wiki visant à maîtriser bash via les différents caractère spéciaux.
• Niveau requis :

  débutant, avisé
  • Création par Hypathie 20/03/2014
  • Testé par <Hypathie> le <Avril 2014>
• * Suivi : a-placer
• Commentaires sur le forum : Lien vers le forum concernant ce tuto ¹⁾

Voici une étude du Bash qui prend comme entrée les différents caractères.
Plus précisément, j'ai suivi la page man bash et j'ai tenté d'en expliquer et d'en illustrer le détail par des exemples.
Cette étude est développée sur huit wiki (voir la liste ci-dessous), elle se veut à la fois progressive et synthétique.
Si vous êtes débutant, suivez la progression, si vous cherchez un simple rappel, consultez les tableaux récapitulatifs de chacune des parties suivantes :

1) Intro I : C'est ici !

2) chap II : Bash : Détail et caractères

3) chap III : Bash : les opérateurs lexicographiques

4) chap IV : Bash : les opérateurs de comparaison numérique

5) chap V : Bash : les symboles dans les calculs

6) chap VI : Bash : les tableaux

7) chap VII : Bash : les caractères de transformation de parametres

8) chap VIII : Bash : globs étendus et regex

Enfin, les liens en gras renvoient aux pages du wiki qui sont relatifs au shell, terminal, chemin relatif et absolu, scripts, alias, etc.
Dans cette introduction :

• A) définitions de shell bash et liens internes spécifiques au sujets évoqués ;
  
• B) explication sur l’ambiguïté du terme méta-caractère.
  
• C) définitions de termes associés au shell et liens internes spécifiques au sujets évoqués
  

Yep ! C'est parti !

Le shell (« coquille » en anglais), il également appelé interpréteur de commandes.
C'est une couche logicielle qui fournit l'interface utilisateur d'un système d'exploitation. Il correspond à la couche la plus externe de ce dernier. Il se présente sous la forme d'une interface en ligne de commande accessible depuis la console ou un terminal. L'utilisateur lance des commandes sous forme d'une entrée texte exécutée ensuite par le shell.

Le shell bash est l'un des shell utilisé sous gnu/linux.
Pour un historique et la liste des shell les plus utilisés,

• voir :
  • http://fr.wikipedia.org/wiki/Shell_Unix#Historique_des_shell_Unix
  • le shell pour tous:introduction

Quand on installe debian wheezy, le shell par défaut est le Shell Bash.

env

(Permet de connaître connaître les variables d'environnement de son système) Le retour est copieux ! Mais au début on trouve :

SHELL=/bin/bash

Ce qui signifie que le nom de l'interpréteur de commande est bash.

user@debian-facile:~$ echo $SHELL
/bin/bash

Pour connaître la version de votre Shell Bash, tapez :

user@debian-facile:~$ bash --version
GNU bash, version 3.2.39(1)-release (i486-pc-linux-gnu)
Copyright (C) 2007 Free Software Foundation, Inc.

• Avant d'aller plus loin :
  • Le shell pour tous
  • ET qui dit shell, dit commandes : Utiliser GNU/Linux en ligne de commande, tout commence là !.

Distinguons maintenant les commandes internes et les commandes externes au shell bash, commandes simples et les commandes composées.

Une commande interne est une commande dont le code est implanté au sein du shell. Les commandes sont intégrées, soit pour des raisons de performances (l'appel d'une telle commande ne crée pas de processus fils du shell courant); soit parce qu'une commande intégrée se sert des variables internes du shell.
Cela signifie que lorsqu'on change de shell courant (par exemple bash ou C-shell²⁾, on ne dispose plus des mêmes commandes internes.
Néanmoins, les commandes courantes qui sont essentielles à l'utilisateur, se retrouvent sous les différents shell des distributions Linux.

help

help nom_commande

Une commande externe est une commande dont le code se trouve dans un fichier ordinaire.

whereis nom_commande

which nom_commande

--help nom_commande

Le shell crée un processus pour exécuter une commande externe. Parmi les commandes externes que l'on trouve dans un système, il y a les commandes unix (ex. ls, mkdir, vi, sleep) et les fichiers shell (scripts shell). La localisation du code d'une commande externe doit être connu du shell pour qu'il puisse exécuter cette commande. A cette fin, bash utilise la valeur de sa variable prédéfinie PATH.

type cd
cd est une primitive du shell

type cp
cp est /bin/cp

type sleep
sleep est /bin/sleep

type ls
ls est un alias vers « ls --color=auto »

 whereis ls
ls: /bin/ls /usr/share/man/man1/ls.1.gz

which ls
/bin/ls
# => ls est donc l'alias de la commande externe /bin/ls

Les commandes simples peuvent être des commandes internes ou des commandes externes.

• commandes internes par exemple : type, cd , echo , pwd, export …
• commandes externes par exemple : ls, mkdir, rm, rmdir, vi, cal …

• Voici une liste non exhaustive des commandes simples, on y retrouve des commandes internes et externes :

cat, chgrp, chmod, chown, cp, date, dd, df, dmesg, echo, ed, export, 
false, kill, ln, login, ls, mkdir, mknod, more, mount, mv, ps, pwd, 
rm, rmdir, sed, setserial, sh, stty, su, sync, true, umount, uname.

(Consultez la documentation pour plus d'information sur chacune d'entre elles.)

Les commandes composées peuvent toutes être considérées comme des commandes internes, en tant qu'elles sont des structures de contrôle.

• Voici les commandes composées :

case ... esac ; if ... fi ; for ... done ; select ... done ; until ... done ; while ... done ; 
{...} ; ( ... ) ; ((...)) ; [ ... ] ; [[ ]]

• Sur l'utilisation et la syntaxe de ces commandes voir : Fonctionnalités avancées du Shell

Les simples quotes : ' délimitent une chaîne de caractères.
Même si cette chaîne contient des commandes ou des variables shell, celles-ci ne seront pas interprétées. Par exemple :

$ variable='secret'
$ echo 'Mon mot de passe est $variable.'
Mon mot de passe est $variable.

Les doubles quotes : “ délimitent une chaîne de caractères, mais les noms de variable sont interprétés par le shell. Par exemple :

$ variable="secret"
$ echo "Mon mot de passe est $variable."
Mon mot de passe est secret.

Ceci est utile pour générer des messages dynamiques au sein d'un script.

echo coucou tout le monde

echo "coucou tout le monde"

Bash considère que les anti-quotes (`) délimitent une commande à exécuter.
Les noms de variable et les commandes sont donc interprétés. Autrement dit, les anti-quotes³⁾ remplacent de manière itérative un argument par une commande, comme le fait la commande xargs.

• soit un fichier “Dossier.txt” contenant “dossier1”; “dossier2” ; “dossier3”

mkdir Dossier.txt
cd ~/Dossier.txt/
touch dossier1
touch dossier2
touch dossier3

• toujours au niveau de Dossier.txt :

ls
dossier1  dossier2  dossier3

• puis :

rm `ls`
 
#puis ls pour vérifier qu'il n'y a plus de fichier (retour du prompt)

• comparez maintenant avec :

touch dossier1
touch dossier2
touch dossier3
ls
dossier1  dossier2  dossier3

• puis:

ls | xargs rm
#puis ls pour vérifier qu'il n'y a plus de fichier (retour du prompt)

• Autre exemple :

echo `ls` 

Cette commande affiche le contenu du répertoire courant à l'écran.
Elle est strictement équivalente à ls.

• À voir : Guide avancé d'écriture des scripts Bash: 11. Substitution de commandes

• Un métacaractère (en anglais, wild card ou joker) est un caractère qui représente un ou plusieurs autres caractères qui eux sont interprétés littéralement.

Certains caractères spéciaux sont appelés “méta-caractères” ; soit parce qu'ils servent à effectuer des recherches sur les mots ; soient parce qu'ils servent dans les expressions rationnelles; soit encore parce qu'ils représentent symboliquement quelque chose, un fichier, la valeur d'une variable ; finalement parce que ces caractères représentes symboliquement quelque chose;

• D'une part, dans le wiki Les métacaractères, ou globs, ou encore patterns présente les méta-caractères (? ; * ) et le caractère spécial [ ] (bracket expression) communs aux différents shell.

Voici un tableau qui regroupe les méta-caractères :

• D'autre part, man glob et man bash les appellent au contraire caractères génériques.
  

En effet, une chaîne de caractères ordinaires est un motif.
Et un motif contenant un ou plusieurs “caractères géniriques” est appelé un “motif générique”.
Les caractères génériques servent à évoquer un ou plusieurs caractères ; mais aussi l'emplacement d'un et/ou plusieurs caractères.
Quant au globbing, cela concerne l'opération qui permet d'invoquer par un motif générique, une liste de noms de fichiers pouvant correspondre à ce motifs.
Un enchaînement de motifs génériques est nommée par extension, “une expression générique”.
Dans la terminologie de man bash, il s'agit bien des mêmes caractères recouvrant la même fonction. Bref, Un caractère générique est une sous-classe de ce qui y est appelé caractère spécial et renvoie à la fonction de globbing.

• Enfin, ces expressions génériques sont issues d'un mécanisme plus large et plus complexe appelé, “expressions rationnelles” (ou “expressions régulières”, et en anglais “regular expressions”)
  

Les termes regex ou regexp en sont les abréviations à partir du terme anglais “regular expressions”.

• Voir : Regexp et grep
  
• Voir : Regex et sed
  

Pour un rappel des principaux caractères des expressions rationnelles voir : INDEX

• Dans un contexte proche, c'est-à-dire qui concerne la gestion des chaînes de caractères, le shell possède des mots réservés et des syntaxes qui permettent de modifier la valeur des variables ou paramètres créés(ées) par l'utilisateur.

# Dans les accolades précédées de $ : ${  } on peut trouver les caractères :
:-    :=    :    ::    :+   :?    @    *    ##    %%    %
# Ne pas confondre avec joker ou bracket vus ci-dessus

C'est le sujet chap. 7 : Bash : les caractères de transformation de parametres

Détails et exercices, l'essentiel est là : métacaractères, ou globs, ou encore patterns

On sait que ls -a permet de lister tous les fichiers, le retour est alors un peu trop copieux

De même ls -a* est très prolixe.

On peut alors faire :

ls -d .*

⇒ On obtiendra alors tous les fichiers cachés.

Pour affiner la recherche on faire pour n'avoir que ceux dont le nom commence par un c :

ls -d .c*

Retour :

.cache  .config

• RAPPEL :
  1. L'étoile correspond à n'importe quelle chaîne.
     
  2. Si l'on fait *.txt on représente tous les fichiers se terminant par ”.txt“.
     
  3. Mais attention : . représente un point (.) mais aussi deux points (..)

ls .*    # et son équivalent : ls .?*

⇒ va afficher du répertoire courant (.) : tous les fichiers cachés (normaux) et tous les fichiers cachés de type-répertoire avec les noms des fichiers cachés contenus dans ces répertoires ;
mais aussi du répertoire parent (..) : tous les fichiers cachés normaux et les fichiers cachés de type-répertoire, avec les noms des fichiers cachés contenus dans ces répertoires !

• Solutions :

ls .[!.]*

⇒ liste du répertoire courant : tous les fichiers cachés normaux et les fichiers cachés de type-répertoire, avec les fichiers cachés de ces répertoires.

ls -d .[!.]*   # et son équivalent : ls -d .??*

⇒ liste du répertoire courant : tous les noms de fichiers normaux cachés et le nom de tous les fichiers cachés de type-répertoire (sans leurs contenus cette fois !)

• Soit un répertoire “FICHIER-cach.essai” contenant :
• surtout : se déplacer :

cd /chemin/vers/FICHIER-cach.essai

• Visualiser ce qu'on fait :

ls -la
total 8
drwxr-xr-x  2 hypathie hypathie 4096 mai   26 09:29 .
drwxr-xr-x 34 hypathie hypathie 4096 mai   26 09:28 ..
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 fichier1
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 .fichier1
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 fichier2
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 .fichier2
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 fichier3
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 .fichier3

• Pour en supprimer uniquement les fichiers cachés :

user@nom-machine:~/FICHIER-cach.essai$ rm -i \.f*
rm : supprimer fichier vide « .fichier1 » ?
#répondre yes
rm : supprimer fichier vide « .fichier2 » ?
#répondre yes
rm : supprimer fichier vide « .fichier3 » ?
#répondre yes

• Vérification :

ls -la
total 8
drwxr-xr-x  2 hypathie hypathie 4096 mai   26 10:03 .
drwxr-xr-x 34 hypathie hypathie 4096 mai   26 09:28 ..
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 fichier1
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 fichier2
-rw-r--r--  1 hypathie hypathie    0 mai   26 09:29 fichier3

rm -rf /

rm: il est dangereux d'opérer récursivement sur "/"
rm: utiliser --no-preserve-root pour inhiber cette mesure de sûreté

rm /*

rm: impossible de supprimer "/bin": est un dossier

rm -rf /*

méta-caractère
    Un caractère qui, non protégé, sépare les mots. Un de ceux-ci :

        | & ; ( ) < > espace tabulation 

Un “mot” est quant à lui “une séquence de caractères considérée comme une unité élémentaire par le shell. On parle également de token (jeton)”.

Mais pourquoi évoquer les mêmes caractères sous des appellations différentes ?
Pourquoi trouve-t-on certains caractères dans la définition des méta-caratères ci-dessus, mais aussi dans la liste des opérateurs de contrôle ?
S'agit-il de la même chose?

Cette appellation méta-caractère que l'on trouve dans le man bash, renvoie à l'analyse et au traitement par le shell de la ligne de commande. L'ordre d'analyse est le suivant :

1. découpage lexical en mots ;
2. découpage en commandes (lignes de tubes, instructions de contrôle (if, while…) ) ;
3. analyse des redirections ;
4. expansion des paramètres ;
5. substitution de commande;
6. redécoupage en mots des chaînes substituées;
7. expansion des noms de fichier;
8. lancement des commandes;*
9. récupération de la sortie

Chacun des caractères ci-dessus permet de découper la ligne de commande en mots à l'aide des blancs, non seulement avec “espace” et tabulation”, mais aussi avec ces autres séparateurs de mots : | (il ne s'agit pas “encore” du pipe) & ; , < , >
Ce qu'il faut comprendre, c'est que “espace et “tabulation” permettent de déterminer la commande (premier mot), des (ou de l'option) options (reconnue(s) par - placé avant elle(s), et les arguments. Les autres signes ci-dessus, désignés de méta-caractères, sont des séparateurs de mots différents de “espace” et “tabulation” parce que, en plus de séparer les mots, ils indiquent le contexte d'exécution des commandes.

Ce qu'il faut comprendre c'est que les méta-caractères, outre “espace” et “tabulation”, font partie des caractères spéciaux de bash. Il s'agit avec cette définition d'une première évocation simplifiée indiquant que parmi tous les caractères spéciaux, ces “méta-caractères” se trouvent là présentés seuls | & ; ( ) < > pour indiquer que leurs significations dépendra de l'étape 2 ci-dessus, du contexte des commandes. Ce contexte dépend des commandes puis selon la composition de ces méta-caractères entre eux, et/ou la présence de commandes, de la mise en oeuvre des commandes internes, des opérateurs d'enchaînement de commandes, des opérateurs de redirection.

    ||    &&    ;    &    ;;    ( )    |    <retour-chariot> 

 ||    &&    ;    <retour-chariot> 

case $variable-name in
   pattern1|pattern2|pattern3
#          ^        ^
#          ou       ou
     command1
     ...
     commandN
   *)
esac
 

ls ~/Test/!(*jpg|*bmp)

name (){
commands
return $TRUE
}
name

À voir : enchainer-plusieurs-commandes

<    >    >   |   <<   >>   <&   >&   

    >    >>    <    <<    >&    |

<&-   <&-  

• À voir :
  • rediriger-l-affichage
  • exercices avec les chevrons
  • redirections dans les scripts

Un script est la rédaction dans un fichier texte d'un ensemble de commandes et d'expressions régulières (caractères utilisés symboliquement) orientant les instructions données aux commandes.

• Pour une initiation au script : debuter-avec-les-scripts-shell-bash
• sur “if”, “les boucles”, etc. : Fonctionnalités avancées du Shell
• considérations avancées : Rédaction de scripts Shell
• Pour les DÉBUTANTS AVISÉS francophile : http://abs.traduc.org/abs-fr/pt01.html
• Pour les DÉBUTANTS AVISÉS et anglophile, voir là :http://mywiki.wooledge.org/BashFAQ

• À voir aussi : scripts debian-facile :
  • [pygtk] Comment faire un notebook avec bouton "fermer"
  • [bash] Réalisation d'un script contenant des Alias
  • [bash] Déterminer si un fichier ou répertoire existe
  • [bash] Déterminer si un partage existe sur un disque réseau de type Synology
  • [bash] Lire un fichier texte ligne par ligne
  • [bash] Section d'un paquet debian
  • [bash] Dépôt d'un paquet debian
  • [bash] Convertir dans plusieurs sous-répertoires des images .png en .jpg

• Avant tout le chapitre : Le shell pour tous : Les Alias

• L'essentiel est là : Maîtriser les alias bash

• alias et script : Réalisation d'un Script contenant des Alias

Bash : Détail et caractères