par Javier Palacios Bermejo L´auteur: Javier prépare un Ph. D. en astronomie à l'université espagnole où il administre un réseau de stations de travail. Ses travaux journaliers se font sur des machines Unix. Une distribution Slackware Linux a été choisie après quelques problèmes initiaux et des essais. Linux s'est révélé bien meilleur que d'autres Unix propriétaires. Sommaire: |
Résumé:
C'est une introduction au bon vieux programme AWK d'Unix. Elle montre comment écrire de petites séquences type AWK pour automatiser les tâches du travail quotidien.
Au départ, l'idée d'écrire ce texte m'est venue après avoir lu deux autres articles publiés dans LinuxFocus et écris par Guido Socher. Le premier, concerne find et les commandes associées, m'a montré que je n'étais pas le seul à utiliser la ligne de commande. Souvent,de belles interfaces graphiques ne vous disent pas comment les choses se passent réellement (c'est de cette manière que windows est arrivé il y a des années). L'autre article concerne les expressions régulières. Bien que les expressions régulières ne soient que légèrement abordées dans le présent article, il est nécessaire de les connaître pour tirer le maximum d'awk et d'autres commandes comme sed et grep.
A la question: "la commande awk est elle réellement utile?" nous répondons
sans ambiguité oui! Awk peut être utile pour un utilisateur lambda afin de traiter des fichiers texte,
les reformater etc... Pour un administateur système, awk est vraiment un utilitaire très important.
Jetez donc un coup d'oeil à /var/yp/Makefile
ou aux scripts d'initialisation. Awk est utilisé
partout.
Mes premiers pas avec awk sont sufisement vieux pour avoir été oubliés. J'avais un collègue
qui devais travailler avec de très grosse sorties issues d'un petit Cray. La page du manuel
pour awk
sur le cray était vraiment réduite au minimum, mais il décida quand même
qu'awk ressemblait beaucoup à ce qu'il souhaitait même s'il ne savait pas encore l'utiliser.
Beaucoup plus tard, dans une situation banale de la vie courante, un autre collègue utilisa
awk pour extraire la première colonne d'un tableau:
|
Une fois que nous savons extraire une colonne, nous pouvons faire des choses comme
renommer des fichiers:
ls -1 pattern | awk '{print "mv "$1" "$1".new"}' | sh
... et il y en a d'autres. L'utilisation de sed
ou de grep
avec les exemples précédents, nous donne des outils encore plus puissants.
ls -1 *old* | awk '{print "mv "$1" "$1}' | sed s/old/new/2 | sh
ls -l * | grep -v drwx | awk '{print "rm "$9}' | sh
ls -l | grep '^d' | awk '{print "rm -r "$9}' | sh
ls -p | grep /$ | awk '{print "rm -r "$1}'
)
Comme vous pouvez le voir, awk est d'un grand secours pour répéter de nombreuses fois une opération... et en plus de cela, il est bien plus amusant d'écrire un programme awk que de répeter 20 fois la même chose manuellement.
Bien que nous utilisions le terme commande-awk
, awk n'est pas
le genre de chose qui est habituellement appelé une commande.
awk
est un langage de programmation, avec une syntaxe
proche du C à beaucoup d'égards. C'est un langage interprété et
l'interpréteur awk
traduit des instructions.
Voici la syntaxe de la commande:
# gawk --help Usage: gawk [POSIX or GNU style options] -f progfile [--] file ... gawk [POSIX or GNU style options] [--] 'program' file ... POSIX options: GNU long options: -f progfile --file=progfile -F fs --field-separator=fs -v var=val --assign=var=val -m[fr] val -W compat --compat -W copyleft --copyleft -W copyright --copyright -W help --help -W lint --lint -W lint-old --lint-old -W posix --posix -W re-interval --re-interval -W source=program-text --source=program-text -W traditional --traditional -W usage --usage -W version --version Report bugs to [email protected], with a Cc: to [email protected]Au lieu d'encadrer la commande avec des guillemets simples ('), on peut les écrire dans un fichier et l'appeler avec l'option
-f
, ainsi qu'avec
des variables définies en ligne de commande avec -v var=
Awk est, en gros, un langage de traitement de tableau. Autrement dit, dédié à des informations qui peuvent être groupées en champs et enregistrements. L'avantage ici réside dans l'extrème flexibilité de ces deux définitions.
Awk est puissant. Il est conçu pour travailler avec des enregistrements arrangés en lignes; mais ceci peut être modifié. Afin de présenter plus en détails certains de ces aspects, nous allons etudier quelques exemples représentatifs tirés de cas réels.
awk
), ce n'est pas trop difficile:
BEGIN { printf "LaTeX preample" printf "\\begin{tabular}{|c|c|...|c|}" } |
{ printf $1" & " printf $2" & " . . . printf $n" \\\\ " printf "\\hline" } |
END { print "\\end{document}" } |
|
( $1 == "====>" ) { NomObj = $2 TotObj = $4 if ( TotObj > 0 ) { FS = "|" for ( cont=0 ; cont<TotObj ; cont++ ) { getline print $2 $4 $5 $3 >> NomObj } FS = " " } } |
NOTA: En fait, le nom de l'objet n'étatit pas donné et ce fut légèrement plus compliqué; mais ceci est supposé être un exemple didactique. |
BEGIN { BEGIN_MSG = "From" BEGIN_BDY = "Precedence:" MAIN_KEY = "Subject:" VALIDATION = "[MONTH REPORT]" HEAD = "NO"; BODY = "NO"; PRINT="NO" OUT_FILE = "Month_Reports" } { if ( $1 == BEGIN_MSG ) { HEAD = "YES"; BODY = "NO"; PRINT="NO" } if ( $1 == MAIN_KEY ) { if ( $2 == VALIDATION ) { PRINT = "YES" $1 = ""; $2 = "" print "\n\n"$0"\n" > OUT_FILE } } if ( $1 == BEGIN_BDY ) { getline if ( $0 == "" ) { HEAD = "NO"; BODY = "YES" } else { HEAD = "NO"; BODY = "NO"; PRINT="NO" } } if ( BODY == "YES" && PRINT == "YES" ) { print $0 >> OUT_FILE } } |
Si nous sommes administrateur d'une liste de courrier et que de temps en temps,
des messages spéciaux y sont envoyés (par exemple des rapports mensuels) avec un
format spécifique (le sujet contient '[MONTH REPORT] mois , dept'). Nous pouvons
décider soudainement à la fin de l'année de regrouper ces messages à part des autres.
Ceci peut être fait en traitant le buffer de courrier avec le programme awk sur la gauche. Pour que chaque rapport soit écrit individuellement dans un fichier, nous aurons besoin de trois lignes de code supplémentaires. |
NOTA: Cet exemple suppose que le tampon de courrier est structuré comme je l'attends. En fait, je ne connais pas le format réel, mais ce programme fonctionne avec mon installation (ici aussi, dans certains cas étranges, il pourrait ne pas marcher). |
Des programmes comme ceux-ci ne prennent que 5 mn à élaborer et 5 de plus à écrire (ou bien plus de 20 mn sans réfléchir en utilisant la méthode plus drôle des essais et erreurs succesifs).
J'ai utilisé awk pour beaucoup d'autres tâches (génération automatique
d'informations four des bases de données simples) et j'en sais suffisemment sur le
sujet pour être certain que l'on peut en faire beaucoup de choses.
Laisser juste votre imagination faire le reste.
Jusqu'ici, tous les exemples cités traitent toutes les lignes du fichier d'entrée. Mais, comme spécifié dans la page du manuel, il est possible de ne traiter que certaines de ces lignes. Il suffit juste de faire précéder le groupe de commandes avec la condition que doit remplir la ligne. Cette condition peut aller d'une simple expression régulière pour vérifier le contenu d'un champ à la possibilité de grouper les conditions avec des opérateurs logiques adaptés.
Comme tous les autres langages de programmation, awk
propose
toutes les structures de contrôle nécessaires ainsi qu'un jeux d'opérateurs
et de fonctions prédéfinies pour manipuler les nombres et les chaînes. La
syntaxe est proche du C.
Et bien sûr, il est possible d'inclure des fonctions définies par l'utilisateur avec le mot clef function, en écrivant les commandes associées comme si l'on traitait une ligne du fichier d'entrée. En plus des variables scalaires habituelles, awk peut aussi manipuler des tableaux de taille variable.
Comme dans tous langages de programmation, il existe des fonctions très
fréquemment utilisées et qu'il est incomfortable de couper-coller depuis
d'autres lignes de code source. C'est la raison pour laquelle les bibliothèques
existent. Avec la version GNU d'awk
, il est possible de les inclure
avec le programme awk
. Ceci fait par contre partie des sujets qui dépassent
les objectifs de cet article.
AWK est très bien adapté pour les raisons qui ont conduit à sa construction: Lire des lignes et agir en fonction de leur contenu.
Des fichiers comme /etc/password
s'avèrent idéaux pour être
traités et reformatté par AWK. Ce dernier est inestimable pour de telles tâches.
Bien sûr,AWK n'est pas seul. Perl est un compétiteur très valable mais qui n'empêche pas de connaître quelques trucs AWK.
Ces commandes de base ne sont pas forcément bien documentées, vous devriez toutefois trouver votre bonheur en cherchant un peu.
man awk
D'habitude, tous les livres unix mentionnent cette commande mais seuls quelques uns donnent des détails utils. Le mieux que nous puissions faire est de parcourir tous les livres qui nous passent entre les mains car on ne sait jamais d'avance où l'information utile peut être trouvée.
Site Web maintenu par l´équipe d´édition LinuxFocus
© Javier Palacios Bermejo LinuxFocus 2000 Cliquez ici pour signaler une erreur ou envoyer un commentaire à Linuxfocus |
Translationinformation:
|
2000-03-16, generated by lfparser version 1.2b