Programmation shell sous Unix/Linux

Transcription

1 Editions ENI Programmation shell sous Unix/Linux sh, ksh, bash (3 ième édition) Collection Ressources Informatiques Table des matières

2 Les exemples cités tout au long de cet ouvrage sont téléchargeables à l'adresse suivante : Saisissez la référence ENI de l'ouvrage RI3PRO dans la zone de recherche et validez. Cliquez sur le titre du livre puis sur le lien de téléchargement. Avant-propos Introduction Chapitre 1 A. Définition du shell B. Caractéristiques d'un interpréteur de commandes C. Historique du shell D. Principaux interpréteurs de commandes E. Shells abordés dans cet ouvrage Mécanismes essentiels du shell Chapitre 2 A. Commandes internes et externes Les commandes externes Les commandes internes Implémentation interne et implémentation externe B. Affichage à l'écran La commande echo a. Le caractère "\n" b. Le caractère "\c" sh, ksh, bash 1

3 c. Le caractère "\t" d. Liste des caractères d'échappement Les commandes print et printf C. Le caractère ~ (tilde) D. La commande interne cd E. Substitution de noms de fichiers Expressions basiques a. Le caractère * b. Le caractère? c. Les caractères [ ] Expressions complexes a.?(expression) b. *(expression) c. +(expression) e.!(expression) f. Alternatives Interprétation du shell F. Séparateur de commandes G. Redirections Entrée et sorties standard des processus a. Entrée standard b. Sortie standard c. Sortie d'erreur standard Héritage Redirection des sorties en écriture a. Sortie standard b. Sortie d'erreur standard Programmation shell sous Unix/Linux

4 c. Sortie standard et sortie d'erreur standard d. Éliminer les affichages e. Mécanisme interne Redirection de l'entrée standard Redirections avancées a. Rediriger les descripteurs 1 et 2 vers le même fichier b. La double redirection en lecture c. Fermeture d'un descripteur H. Tubes de communication Commandes ne lisant pas leur entrée standard Commandes lisant leur entrée standard a. Exemples triviaux b. Cas des filtres Compléments a. Enchaîner des tubes b. Dupliquer les sorties c. Envoyer la sortie standard et la sortie d'erreur standard dans le tube I. Regroupement de commandes Les parenthèses Les accolades Conclusion J. Processus en arrière-plan sh, ksh, bash 3

5 Paramétrage de l'environnement de travail Chapitre 3 A. Variables d'environnement Liste des variables Affichage de la valeur d'une variable Modification de la valeur d'une variable Principales variables a. HOME b. PATH c. PWD d. PS e. PS f. TMOUT g. TERM h. LOGNAME i. Processus et variables d'environnement Exportation des variables a. Liste des variables exportées b. Variables devant être exportées c. Exporter une variable B. Les options du shell Activer et désactiver une option du shell Visualiser la liste des options Principales options a. ignoreeof b. noclobber c. emacs et vi d. Xtrace Programmation shell sous Unix/Linux

6 C. Les alias Définir un alias Visualiser la liste des alias a. Visualiser tous les alias b. Visualiser un alias en particulier Supprimer un alias D. Historique de commandes Paramétrer le rappel de commandes en ksh a. Option vi b. Option emacs Paramétrer le rappel de commandes en bash La complétion de noms de fichiers a. La complétion du bash b. La complétion du ksh c. Tableau récapitulatif E. Les fichiers d'environnement Caractéristiques des fichiers d'environnement a. Shell de connexion b. Fichiers d'environnement lus par le shell de connexion Session utilisant un Bourne Shell Session utilisant un Korn Shell Session utilisant un Bourne Again Shell Les bases de la programmation shell Chapitre 4 A. Les variables utilisateur Nommer une variable sh, ksh, bash 5

7 2. Définir une variable a. Affecter une chaîne de caractères à une variable b. Affecter une chaîne de caractères contenant au moins un espace 115 c. Variable indéfinie d. Retirer la définition d'une variable e. Isoler le nom d'une variable Substitution de variables B. Substitution de commandes C. Caractères de protection Les simples quotes Le caractère \ Les guillemets D. Récapitulatif des caractères spéciaux E. Interprétation d'une ligne de commande F. Écriture et lancement d'un script shell Définition Exécution d'un script par un shell enfant Exécution d'un script par le shell courant Commentaires G. Variables réservées du shell Les paramètres positionnels La commande shift a. Syntaxe b. Principe Code de retour d'une commande a. La variable $? b. La commande exit Programmation shell sous Unix/Linux

8 4. Autres variables spéciales a. PID du shell interpréteur b. PID du dernier processus lancé en arrière-plan H. La commande read Syntaxe Lectures au clavier Code de retour La variable IFS I. Exécution de tests La commande test a. Syntaxe b. Tests sur les fichiers c. Tests sur les chaînes de caractères d. Tests sur les nombres e. Les opérateurs f. Exemple concret d'utilisation La commande [[ ]] J. Les opérateurs du shell Évaluation de l'opérateur && Évaluation de l'opérateur K. L'arithmétique La commande expr a. Syntaxe b. Opérateurs La commande (( )) a. Syntaxe b. Utilisation La commande let sh, ksh, bash 7

9 L. Substitution d'expressions arithmétiques M. Mise au point d'un script Option -x Autres options N. Les structures de contrôle if Case a. Syntaxe b. Principe c. Utilisation Boucle for Boucle while a. Syntaxe b. Utilisation c. Boucle infinie until a. Syntaxe b. Utilisation break et continue Aspects avancés de la programmation shell Chapitre 5 A. Comparatif des variables $* et $@ Utilisation de $* et de $@ Utilisation de "$*" Utilisation de "$@" Programmation shell sous Unix/Linux

10 B. Substitution de variables Longueur de la valeur contenue dans une variable Manipulation de chaînes de caractères a. Retirer le plus petit fragment à gauche b. Retirer le plus grand fragment à gauche c. Retirer le plus petit fragment à droite d. Retirer le plus grand fragment à droite C. Tableaux Assigner un élément Référencer un élément Assignement global d'un tableau Référencer tous les éléments d'un tableau Obtenir le nombre d'éléments d'un tableau Obtenir la longueur d'un élément d'un tableau D. Initialisation des paramètres positionnels avec set E. Les fonctions Définition d'une fonction Code de retour d'une fonction Portée des variables Définition de variables locales Passage d'arguments Exploiter l'affichage d'une fonction Programme complet de l'exemple F. Commandes d'affichage La commande print a. Utilisation simple b. Suppression du saut de ligne naturel de print sh, ksh, bash 9

11 c. Afficher des arguments commençant par le caractère "-" d. Écrire sur un descripteur particulier La commande printf G. Gestion des entrées/sorties d'un script Redirection des entrées/sorties standard Gestion de fichiers a. Ouverture de fichier b. Lecture à partir d'un fichier c. Écriture dans un fichier d. Fermeture d'un fichier Traitement d'un fichier a. Informations préalables b. Les différentes façons d'exploiter un fichier c. Découper une ligne en champs H. La commande eval I. Gestion des signaux Principaux signaux Ignorer un signal Modifier le traitement associé à un signal Repositionner le traitement par défaut du shell vis-à-vis d'un signal Utiliser trap à partir d'un script shell J. Gestion de menus avec select K. Analyse des options d'un script avec getopts L. Gestion d'un processus en arrière-plan Programmation shell sous Unix/Linux

12 M. Script d'archivage incrémental et transfert sftp automatique Objectif Le fichier uploadbackup.sh Le fichier fonctions.inc.sh Les expressions régulières Chapitre 6 A. Introduction B. Caractères communs aux ERb et Ere C. Caractères spécifiques aux ERb D. Caractères spécifiques aux ERe E. Exploitation des expressions régulières par les commandes La commande vi La commande grep La commande expr sed et awk La commande sed Chapitre 7 A. Utilisation de la commande sed B. Exemples Utilisation de sed en ligne de commande a. La commande d (delete) b. La commande p (print) sh, ksh, bash 11

13 c. La commande w (write) d. Négation d'une commande (!) e. La commande s (substitution) Script sed Le langage de programmation awk Chapitre 8 A. Principe Syntaxe Variables spéciales a. Variables prédéfinies dès le lancement de awk b. Variables initialisées lors du traitement d'une ligne c. Exemples simples Critères de sélection a. Expressions régulières b. Tests logiques c. Intervalles de lignes Structure d'un script awk a. BEGIN b. Sections intermédiaires c. END d. Commentaires e. Variables f. Exemple B. Opérateurs C. La fonction printf D. Redirections Programmation shell sous Unix/Linux

14 E. Lecture de la ligne suivante : next F. Structures de contrôle if for While do-while break continue G. Terminer un script H. Tableaux Tableaux indicés par un entier Tableaux associatifs a. Définition b. Tester l'existence d'un élément c. Supprimer un élément I. Les arguments de la ligne de commande J. Fonctions intégrées Fonctions travaillant sur les chaînes Fonctions mathématiques Autres fonctions a. La fonction getline b. La fonction close c. La fonction system K. Fonctions utilisateur sh, ksh, bash 13

15 L. Exemples de scripts Analyse d'un fichier de log Génération d'un fichier d'étiquettes Les commandes filtres Chapitre 9 A. Introduction B. Syntaxe d'appel des commandes filtres C. Visualisation de données Consultation de données, création de fichier : cat Valeur des octets d'un flux de données : od Filtrage de lignes : grep Dernières lignes d'un flux de données : tail Premières lignes d'un flux de données : head Duplication de la sortie standard : tee Numérotation de lignes : nl Présentation d'un flux de données : pr D. Traitement de données Comptage de lignes, de mots et de caractères : wc Extraction de caractères : cut Tri de données : sort paste split Transformation de caractères : tr Dédoublonnage : uniq Programmation shell sous Unix/Linux

16 E. Compressions, archivages et conversions Compressions : gzip, bzip Archives tar Archives cpio Copie physique, transformations : dd Changement d'encodage : iconv F. Commandes réseau sécurisées Connexion à distance : ssh Transfert de fichier : sftp a. Commandes de sftp s'exécutant sur la machine locale b. Commandes s'exécutant sur la machine distante c. Commandes de transfert d. Connexion automatique sans mot de passe G. Autres commandes La commande xargs Comparer deux fichiers : cmp Lignes communes à deux fichiers : comm Annexes A. Caractères spéciaux du shell B. Commandes internes au shell C. Ordre d'interprétation d'une commande Index sh, ksh, bash 15

17 Editions ENI Unix Administration du système (AIX, HP-UX, Solaris, Linux) (2 ième édition) Collection Ressources Informatiques Table des matières

18 1 Les éléments à télécharger sont disponibles à l'adresse suivante : Saisissez la référence ENI de l'ouvrage RI2UNIA dans la zone de recherche et validez. Cliquez sur le titre du livre puis sur le bouton de téléchargement. Avant-propos 1. Objectif de ce livre Présentation de l'ouvrage Chapitre 1 Introduction 1. Principales utilisations professionnelles d'unix Particularité des serveurs dédiés Caractéristiques essentielles des serveurs par rôle Dernières tendances d'évolution des serveurs Unix Versions Unix, distributions Linux Principales versions commerciales Versions libres Influence des logiciels libres La fonction d'administrateur Outils de travail La documentation Chapitre 2 Disques et systèmes de fichiers 1. Quelques rappels indispensables Les principaux répertoires Droits d'accès aux fichiers Permissions de base

19 2 Unix Administration système (AIX, HP-UX, Solaris, Linux) Permissions supplémentaires ACL (Access Control List) Commandes de gestion des permissions Organisation de l'espace disque Organisation classique en partitions Mode bloc et mode raw bloc Visualisation des partitions (Solaris, Linux) Organisation en volumes logiques Terminologie du LVM (Logical Volume Manager) Visualisation de l'organisation (implémentation AIX) Visualisation de l'organisation (implémentation HP-UX) Création d'un groupe de volumes (implémentation AIX) Création d'un groupe de volumes (implémentation HP-UX) Autres implémentations Disques RAID Filesystems Filesystems de type Berkeley Création d'un filesystem "ufs" Solaris Création d'un filesystem "hfs" HP-UX Création d'un filesystem "ext2" Linux Filesystems de type journalisé Création d'un filesystem "jfs" AIX Création d'un filesystem "vxfs" HP-UX Création d'un filesystem "ext3" Linux Montage et démontage Illustration par l'exemple Quelques remarques Démontage Fichier de description des filesystems

20 3 5. Agrandissement et suppression de filesystems Agrandissement d'un filesystem sous HP-UX Agrandissement d'un filesystem sous Linux Agrandissement d'un filesystem sous AIX Suppression d'un filesystem Vérification et paramétrages de filesystem Vérification et réparation Paramétrages Autres types de filesystems Filesystems de type CD-Rom Pseudo-filesystem /proc Quotas Sauvegardes et restaurations La commande tar La commande cpio La commande dd Sauvegardes de filesystems Autres commandes Autres techniques de protection des données Mémoire virtuelle Visualisation Activation Compléments sur les groupes de volumes Partage de fichiers avec NFS Principe de fonctionnement, démons nécessaires Aspect serveur Aspect client Automontage Inventaire des fichiers et des commandes

21 4 Unix Administration système (AIX, HP-UX, Solaris, Linux) Chapitre 3 Périphériques 1. Quelques rappels indispensables sur les fichiers spéciaux Recensement des périphériques présents Périphériques AIX Périphériques HP-UX Périphériques Solaris Périphériques Linux Panorama des périphériques usuels Disques durs Disquettes Bandes magnétiques Terminaux asynchrones La commande stty Processus getty Processus ttymon Solaris Gestion de l'émulation Inventaire des fichiers et des commandes Chapitre 4 Services d'impression 1. Considérations générales Service System V (Solaris - HP-UX) Commandes de l'utilisateur Ajout d'une imprimante locale Imprimantes distantes Mise en œuvre HP-UX Mise en œuvre Solaris Service Berkeley (Linux) Commandes de l'utilisateur Ajout d'une imprimante

22 5 4. Service AIX Commandes de l'utilisateur Principes de fonctionnement et terminologie Ajout d'une imprimante locale Imprimantes distantes Inventaire des fichiers et des commandes Chapitre 5 Groupes et utilisateurs 1. Quelques rappels indispensables Fichiers de configuration Le fichier /etc/passwd Le fichier /etc/group Les fichiers spécifiques sécurisés Solaris, Linux : le fichier /etc/shadow AIX : de nombreux fichiers supplémentaires HP-UX : Trusted Computing Base (TCB) Gestion des groupes Solaris, Linux, HP-UX : groupadd, groupmod, groupdel AIX : mkgroup, chgroup, rmgroup Gestion des comptes utilisateur Création de comptes (Solaris, Linux, HP-UX) Création de comptes (AIX) Désactivation et suppression de comptes Inventaire des fichiers et des commandes Fichiers de configuration Commandes de gestion

23 6 Unix Administration système (AIX, HP-UX, Solaris, Linux) Chapitre 6 Démarrage et paramétrages du système 1. Quelques rappels indispensables sur les processus Attributs d'un processus - Commande ps Signaux - Élimination de processus Démarrage et arrêt du système Premières phases du démarrage Niveaux d'exécution Définitions des niveaux (Solaris, HP-UX, Linux) Définitions des niveaux AIX Programme init - Fichier /etc/inittab Passage au mode multi-utilisateur Paramétrage Protocole AIX Démarrage manuel Arrêt et redémarrage Paramétrages du noyau Inventaire des fichiers et des commandes Chapitre 7 Configuration TCP/IP 1. Quelques rappels sur l'architecture des protocoles TCP/IP Rapide description des couches du modèle Couche accès réseau Couche internet Couche transport Couche application Format des adresses IP Adresses IPv Sous-réseaux Adresses IPv

24 7 2. Interfaces physiques Résolution des noms Fichier /etc/hosts Aspect client DNS Routage Visualisation de la table de routage Routage statique Routage dynamique Démon routed Démon gated Démons essentiels Démon inetd Démon xinetd Quelques commandes de test Inventaire des fichiers et des commandes Chapitre 8 Maintenance quotidienne 1. Service cron de planification des travaux La commande crontab Autorisations Format des fichiers de requêtes La commande at Spécificités Linux Emplacement des fichiers Le fichier /etc/crontab Le démon anacron Inventaire des fichiers et des commandes Gestion des paquetages Exemples Solaris Exemples Linux

25 8 Unix Administration système (AIX, HP-UX, Solaris, Linux) 3. Surveillance quotidienne Fichiers d'historique, messages d'erreur Le démon syslogd Les IPC Observation des performances La commande vmstat La commande iostat La commande sar Applications du langage shell Les différentes versions du langage Intérêts du shell Syntaxe générale et règles d'écriture Shells et sous-shells Les variables d environnement Les tests et les exécutions conditionnelles Les boucles Les scripts shell Quelques outils pratiques à développer Surveillance de l'espace disque Surveillance de la charge CPU et Wait Surveillance de la consommation des processus Autres outils Architecture de l'outil Paramétrage et lancement de la collecte Le script de lancement de la collecte La collecte vmstat La collecte dfstat.ksh La collecte psstat.ksh L'analyse des résultats Index