Forum |  HardWare.fr | News | Articles | PC | S'identifier | S'inscrire | Shop Recherche
1120 connectés 

  FORUM HardWare.fr
  Programmation
  Shell/Batch

  [Shell Bash] Utilisation des semaphores pour paralleliser mon script

 
 


 Mot :   Pseudo :  
 
Bas de page
Auteur Sujet :

[Shell Bash] Utilisation des semaphores pour paralleliser mon script

n°2338436
pierre_4
Posté le 28-08-2019 à 22:27:11  profilanswer
 

Bonjour,
 
Je tente d'améliorer avec les sémaphores un script de traitement de photos qui fonctionne. Je suis sous GNU/Debian stable.
 
J'ai une fonction qui s'appelle travail qui prend en argument le nom d'une image, et la traite.
 
Actuellement, elle est appelée dans le même script à l'aide d'une boucle

Code :
  1. for i in *.png ; do
  2. travail $i &
  3. done


 
Le problème c'est que ça utilise beaucoup de mémoire s'il y a beaucoup de photos. Je voudrai donc utiliser les sémaphores pour limiter le nombre de photos traitées en même temps.
 
Le code

Code :
  1. for i in *.png ; do
  2. sem -j+0 travail $i
  3. done
  4. sem --wait


ne fonctionne pas.
 
J'ai le message d'erreur suivant /bin/bash: travail : commande introuvable
 
J'essaye alors d'ajouter

Code :
  1. export -f travail


juste après la définition de la fonction mais ça ne marche pas mieux :

Citation :

travail sur image 113_XT1S3739.png
convert-im6.q16: unable to open image `x': Aucun fichier ou dossier de ce type @ error/blob.c/OpenBlob/2874.
convert-im6.q16: no decode delegate for this image format `' @ error/constitute.c/ReadImage/560.
convert-im6.q16: invalid argument for option `-quality': -unsharp @ error/convert.c/ConvertImageCommand/2460.
composite-im6.q16: invalid argument for option `-quality': sortie/grand_format/ne_pas_publier_113_XT1S3739.jpg @ error/composite.c/CompositeImageCommand/1241.
travail sur image 113_XT1S3779.png
convert-im6.q16: unable to open image `x': Aucun fichier ou dossier de ce type @ error/blob.c/OpenBlob/2874.
convert-im6.q16: no decode delegate for this image format `' @ error/constitute.c/ReadImage/560.
convert-im6.q16: invalid argument for option `-quality': -unsharp @ error/convert.c/ConvertImageCommand/2460.
composite-im6.q16: invalid argument for option `-quality': sortie/grand_format/ne_pas_publier_113_XT1S3779.jpg @ error/composite.c/CompositeImageCommand/1241.
etc.


 
Pour information, voici le script

Code :
  1. # !/bin/bash
  2. # _____________________________ Paramètres
  4. T_WEB="1000"   # Taille maxi des images pour le web
  5. Q_WEB="100"   # Qualité des images pour le web (100 car il faut les réouvrir pour mettre le logo)
  6. #
  7. H_MOY="1795"   # Hauteur maxi des images pour impression ?x15
  8. L_MOY_11="1347"  # Largeur maxi des images pour impression 11x15
  9. L_MOY_10="1204"  # Largeur maxi des images pour impression 10x15
  10. Q_MOY="96"   # Qualité des images pour impression 10x15
  11. #
  12. Q_GRA="99"   # Qualité des grandes images
  13. #
  14. B_INT="0.1%"   # Taille de la bordure intérieure
  15. B_CEN="0.3%"   # Taille de la bordure intérieure
  16. B_EXT="4%"   # Taille de la bordure extérieure
  17. C_INT="white"   # Couleur de la bordure intérieure
  18. C_CEN="black"   # Couleur de la bordure intérieure
  19. C_EXT="white"   # Couleur de la bordure extérieure
  20. #
  21. # __________________________________________________________________
  22. #
  23. # Fonction principale
  24. #
  25. function travail
  26. {
  27. # Lecture du nom de fichier à traiter
  28. local f=$1
  29. echo 'travail sur image' $f
  30. # Récupération d'infos sur l'image en cours
  31. local LARG=`convert -quiet -ping $f -format "%w" info:`
  32. local HAUT=`convert -quiet -ping $f -format "%h" info:`
  33. local LARG=${LARG:0:4} # On ne conserve que les 4 premiers chiffres, le reste n'est pas bon
  34. local HAUT=${HAUT:0:4}
  35. local DECALE_X=$(($LARG/24))
  36. local DECALE_Y=$(($HAUT/22))
  37. #
  38. # Récupération du nom du fichier et de l'extension
  39. local nomfichier="${f%%.*}"
  40. #
  41. # Recuperation donnees EXIF (elles sont écrites dans un fichier temporaire)
  42. if [ -f "${nomfichier}.RAF" ]
  43. then
  44.  exiv2 -q ex ${nomfichier}.RAF
  45. fi
  46. if [ -f "${nomfichier}.NEF" ]
  47. then
  48.  exiv2 -q ex ${nomfichier}.NEF
  49. fi
  50. #
  51. # Ajout des bordures
  52. convert $f -quiet -bordercolor ${C_INT} -border ${B_INT}  -bordercolor ${C_CEN} -border ${B_CEN} -bordercolor ${C_EXT} -border ${B_EXT}x${B_EXT} -quality 01 /tmp/$f
  53. #
  54. # Création image WEB
  55. convert /tmp/$f -resize ${T_WEB}x${T_WEB} -quality ${Q_WEB} -unsharp 3 sortie/web/${nomfichier}_pour_internet.jpg
  56. if [ -f "${nomfichier}.NEF" ]
  57. then
  58.  mv ${nomfichier}.exv sortie/web/${nomfichier}_pour_internet.exv
  59.  exiv2 in sortie/web/${nomfichier}_pour_internet.jpg
  60.  exiftool -Orientation=1 -n sortie/web/${nomfichier}_pour_internet.jpg
  61.  rm sortie/web/${nomfichier}_pour_internet.jpg_original
  62. fi
  63. #
  64. # Ajout logo puis conversion en JPG
  65. composite -compose Over -geometry +$DECALE_X+$DECALE_Y -gravity SouthEast /home/pierre/Documents/Photo/baniere-logo/logo_800x600.png /tmp/$f -quality ${Q_GRA} sortie/grand_format/ne_pas_publier_${nomfichier}.jpg
  66. #
  67. if [ -f "${nomfichier}.NEF" ]
  68. then
  69.  mv sortie/web/${nomfichier}_pour_internet.exv sortie/grand_format/ne_pas_publier_${nomfichier}.exv
  70.  exiv2 in sortie/grand_format/ne_pas_publier_${nomfichier}.jpg
  71.  exiftool -Orientation=1 -n sortie/grand_format/ne_pas_publier_${nomfichier}.jpg
  72.  rm sortie/grand_format/ne_pas_publier_${nomfichier}.jpg_original
  73.  rm sortie/grand_format/ne_pas_publier_${nomfichier}.exv
  74. fi
  75. # Suppression des fichiers inutiles
  76. rm /tmp/$f
  77. if [ -f "${nomfichier}.RAF" ]
  78. then
  79.  rm ${nomfichier}.exv
  80. fi
  81. }
  82. #
  83. # _____________________________ Création des dossiers et préparation ___________________________________________
  84. if test -e sortie; then
  85. rm -rf sortie
  86. fi
  87. mkdir sortie
  88. mkdir sortie/web
  89. mkdir sortie/grand_format
  90. #
  91. # _____________________________ Appel de la fonction en parallèle sur toutes les images PNG
  92. #
  93. #
  94. for i in *.png ; do
  95.          travail $i &                                                                 
  96. done 
  97. wait
  98. #
  99. # _____________________________ Fin de la fonction ________________________________________________________
  100. #
  101. echo
  102. echo TERMINÉ


Message édité par pierre_4 le 28-08-2019 à 22:28:02

---------------
--
mood
Publicité
Posté le 28-08-2019 à 22:27:11  profilanswer
 


Aller à :
Ajouter une réponse
  FORUM HardWare.fr
  Programmation
  Shell/Batch

  [Shell Bash] Utilisation des semaphores pour paralleliser mon script

 

Sujets relatifs
besoin d'aide Shell/bash svp[Shell Bash] Vérifier l'absence d'erreur sur équipement Cisco
shell bash edition de fichier besoin d'aideScript shell scripting bash/Linux
script shell bash[shell/bash] - commande via SSH et variables
[Shell/Bash] Compter nombre de fichiers dans un répertoireScript bash - Problème d'espace dans une variable RESOLU
ecrire un script shell avec bash[Shell/Bash] variable dans la commande sed
Plus de sujets relatifs à : [Shell Bash] Utilisation des semaphores pour paralleliser mon script

Forum MesDiscussions.Net, Version 2010.2
(c) 2000-2011 Doctissimo
Page générée en 0.048 secondes

Copyright © 1997-2022 Hardware.fr SARL (Signaler un contenu illicite / Données personnelles) / Groupe LDLC / Shop HFR