GNU parallel

GNU parallel

Informations

Créateur	Ole Tange (d)
Développé par	Communauté GNU parallel (d)
Première version	6 janvier 2002,
Dernière version	20260922 (22 septembre 2026)
Version avancée	20260822 (30 août 2026)
Dépôt	git.savannah.gnu.org/cgit/parallel.git
Écrit en	Perl
Système d'exploitation	GNU/Linux, BSD et macOS
Type	Logiciel utilitaire Paquet GNU
Licence	Licence publique générale GNU version 3 ou ultérieure
Documentation	www.gnu.org/software/parallel/parallel_tutorial.html, www.gnu.org/software/parallel/parallel.pdf et www.gnu.org/software/parallel/parallel_cheat.pdf
Site web	www.gnu.org/software/parallel

modifier - modifier le code - voir Wikidata (aide)

GNU parallel est un utilitaire en ligne de commande développé et maintenu pour le projet GNU par Ole Tange. C'est un logiciel libre permettant l'exécution de routines shell en parallèle sous différents systèmes compatibles UNIX comme GNU/Linux.

Caractéristiques techniques

• Remplacement d'une boucle en shell, par exemple

   (for x in `cat list` ; do 
       foo $x
   done) | processus_de_sortie

sous la forme simplifiée suivante:

   cat list | parallel foo | processus_de_sortie

où la liste des fichiers contient des arguments pour foo et où le processus de sortie peut être vide.

Les scripts utilisant GNU parallel sont souvent plus faciles à lire que les scripts utilisant pexec.

GNU parallel comporte également les fonctionnalités suivantes :

• regroupement de la sortie standard stdout et de la sortie erreur standard stderr afin de traiter séparément la sortie des processus traités en parallèle;
• ordre des sorties identique celui des entrées;
• support des noms de fichiers contenant des caractères spéciaux comme l'espace, les guillemets simples ou doubles, l'esperluette, et des caractères en UTF-8;

GNU parallel peut faire tourner autant de processus en parallèle qu'il y a de processeurs.

Exemples

 find . -name "*.foo" | parallel grep bar

équivaut à:

 grep bar $(find . -name "*.foo")

Recherche de toutes les occurrences de la chaîne bar dans les fichiers du répertoire courant et ses sous-répertoires finissant par l'extension .foo. La commande parallèle va fonctionner comme prévu à moins que le nom de fichier ne contienne une fin de ligne. Pour contourner cette limitation:

 find . -name "*.foo" -print0 | parallel -0 grep bar

L'exemple ci-dessus rajoute des spécificités GNU à la commande find pour séparer les noms de fichiers en utilisant le caractère nul;

 find . -name "*.foo" | parallel -X mv {} /tmp/trash

La commande ci-dessus utilise {} pour dire à parallel de remplacer {} par la liste des arguments.

 find . -maxdepth 1 -type f -name "*.ogg" | parallel -X -r cp -v -p {} /home/media

L'exemple ci-dessus fait la même chose que:

 cp -v -p *.ogg /home/media

cependant, le 1^er utilisant find/parallel/cp consomme moins de ressource et ne va pas s'arrêter avec une erreur si les arguments à *.ogg sont trop nombreux.

Scénarios d'utilisation

GNU parallel est officiellement intégré dans Fedora 16 depuis le 3 octobre 2011. On peut l'utiliser pour la compression de données audio FLAC, pour la compression de données au format zip, dans des situations de tests plus complexes ou avec des logiciels de simulation de Monte-Carlo comme MCX. Il est intégré au toolkit PPBS depuis décembre 2011.

Historique

Cette section est vide, insuffisamment détaillée ou incomplète. Votre aide est la bienvenue ! Comment faire ?

L'origine du projet remonte à 2001 de la propre « expérience utilisateur » de l'auteur.

Notes et références

• (en) Cet article est partiellement ou en totalité issu de l’article de Wikipédia en anglais intitulé « GNU parallel » (voir la liste des auteurs).

Liens externes

• (en) GNU parallel sur la forge Savannah ;
• (en) Notice technique sur le répertoire du logiciel libre ;

v · m Projet GNU
Histoire	Manifeste GNU Free Software Foundation (FSF) Histoire du logiciel libre
Licences	GNU General Public License (GPL) GNU Lesser General Public License (LGPL) GNU Affero General Public License (AGPL) GNU Free Documentation License (GFDL)
Logiciels	Système d'exploitation GNU Bash GCC GDB Emacs Bison Glibc Guile Guix Coreutils Savannah GNUnet Autotools Liste des paquets GNU
Personnalités	Ludovic Courtès (auteur de GNU Guix) Werner Koch Christian Grothoff (auteur de GNUnet) Simon Josefsson Matt Lee Stefan Monnier Alexandre Oliva Thomas Schwinge Richard Stallman John Gilmore Mark H. Weaver Andy Wingo

• Portail des logiciels libres