Doc/BM-Grenoble/Prétraitrement des images - Historique des versions

Groche : /* Chemins des fichiers */ typo

2012-05-03T11:16:50Z

Chemins des fichiers : typo

← Version précédente		Version du 3 mai 2012 à 11:16
Ligne 71 :		Ligne 71 :
	cosmos/comet.jpg		cosmos/comet.jpg
	</syntaxhighlight>		</syntaxhighlight>
	Dans cette exemple le fichier à ligne 4 se trouvent sur le disque à l'emplacement		Dans cette exemple le fichier à ligne 4 se trouvent sur le disque à l'emplacement {{path\|/home/mdia/imgdir/cosmos/blue-marble-west.jpg}}.
	« /home/mdia/imgdir/cosmos/blue-marble-west.jpg ».

	=== Vidage des logs ===		=== Vidage des logs ===

Groche : ajout catégories

2012-05-03T11:15:33Z

ajout catégories

← Version précédente		Version du 3 mai 2012 à 11:15
Ligne 88 :		Ligne 88 :
	</syntaxhighlight>		</syntaxhighlight>
	{{notice\|L'utilitaire produit lors de son exécution des logs. Ces logs peuvent être intéressant pour suivre l’évolution de la tâche ainsi que les éventuels problèmes. On conseille de stocker ces logs en effectuant une redirection de la sortie standard vers un fichier ({{cmd\|cmd '''>>''' fichier}})}}		{{notice\|L'utilitaire produit lors de son exécution des logs. Ces logs peuvent être intéressant pour suivre l’évolution de la tâche ainsi que les éventuels problèmes. On conseille de stocker ces logs en effectuant une redirection de la sortie standard vers un fichier ({{cmd\|cmd '''>>''' fichier}})}}

			[[category:BM-Grenoble]]
			[[category:Notix]]
			[[category:Script]]
			[[category:Python]]
			[[category:Doc]]
			[[category:Java]]

Groche : /* = Exemple d'utilisation */ formatage

2012-05-03T11:13:39Z

= Exemple d'utilisation : formatage

← Version précédente		Version du 3 mai 2012 à 11:13
Ligne 77 :		Ligne 77 :
	{{important\|À chacun de ses passages l'utilitaire [[Java]] tente de gérer tout les images qui sont indiquées comme nouvelles. De ce fait, après chaque passage, il faudrait '''vider ou archiver le fichier de log''' de Rsync. Ainsi, lors du prochain lancement, le fichier de log ne contiendra que les fichiers qui ont été ajouté depuis le dernier passage}}		{{important\|À chacun de ses passages l'utilitaire [[Java]] tente de gérer tout les images qui sont indiquées comme nouvelles. De ce fait, après chaque passage, il faudrait '''vider ou archiver le fichier de log''' de Rsync. Ainsi, lors du prochain lancement, le fichier de log ne contiendra que les fichiers qui ont été ajouté depuis le dernier passage}}

	=== Exemple d'utilisation ~~de l'utilitaire de pré-traitement~~ ==		== Exemple d'utilisation ==
	L’utilitaire à besoin du script « pretraitement_images_plus.py » pour fonctionner. Si ce dernier=		L’utilitaire à besoin du script {{path\|pretraitement_images_plus.py}} pour fonctionner. Si ce dernier n'est pas présent dans le même répertoire, il faut spécifier son emplacement avec le paramétre optionnel « {{cmd\|--py}} ».
	n'est pas présent dans le même répertoire, il faut spécifier son emplacement avec le paramétre
	optionnel « --py ».
	La ligne de commande pour lancer le pré-traitement est :		La ligne de commande pour lancer le pré-traitement est :
			<syntaxhighlight lang="bash">
	java -jar processimages-bin.jar \		java -jar processimages-bin.jar \
	--rFile=/home/mdia/imgdir/res-rsync.txt \		--rFile=/home/mdia/imgdir/res-rsync.txt \
Ligne 87 :		Ligne 86 :
	--imgDir=/home/mdia/imgdir \		--imgDir=/home/mdia/imgdir \
	--py=/home/mdia/projets/bin/pretraitement_images_plus.py		--py=/home/mdia/projets/bin/pretraitement_images_plus.py
			</syntaxhighlight>
	{{~~remarque~~\|L'utilitaire produit lors de son exécution des logs. Ces logs peuvent être ~~intéressent~~ pour suivre l’évolution de la tâche ainsi que les éventuels problèmes. On conseille de stocker ces logs en effectuant une redirection de la sortie standard vers un fichier}}		{{notice\|L'utilitaire produit lors de son exécution des logs. Ces logs peuvent être intéressant pour suivre l’évolution de la tâche ainsi que les éventuels problèmes. On conseille de stocker ces logs en effectuant une redirection de la sortie standard vers un fichier ({{cmd\|cmd '''>>''' fichier}})}}

Groche : /* Vidage des logs */ h3

2012-05-03T11:02:14Z

Vidage des logs : h3

← Version précédente		Version du 3 mai 2012 à 11:02
Ligne 74 :		Ligne 74 :
	« /home/mdia/imgdir/cosmos/blue-marble-west.jpg ».		« /home/mdia/imgdir/cosmos/blue-marble-west.jpg ».

	== Vidage des logs ==		=== Vidage des logs ===
	{{important\|À chacun de ses passages l'utilitaire [[Java]] tente de gérer tout les images qui sont indiquées comme nouvelles. De ce fait, après chaque passage, il faudrait '''vider ou archiver le fichier de log''' de Rsync. Ainsi, lors du prochain lancement, le fichier de log ne contiendra que les fichiers qui ont été ajouté depuis le dernier passage}}		{{important\|À chacun de ses passages l'utilitaire [[Java]] tente de gérer tout les images qui sont indiquées comme nouvelles. De ce fait, après chaque passage, il faudrait '''vider ou archiver le fichier de log''' de Rsync. Ainsi, lors du prochain lancement, le fichier de log ne contiendra que les fichiers qui ont été ajouté depuis le dernier passage}}

Groche : /* NB */ Chemins des fichiers Vidage des logs

2012-05-03T11:01:51Z

NB : Chemins des fichiers Vidage des logs

← Version précédente		Version du 3 mai 2012 à 11:01
Ligne 60 :		Ligne 60 :
	</syntaxhighlight>		</syntaxhighlight>

	=== NB ===		=== Chemins des fichiers ===
	# Dans les logs Rsync les chemins vers les nouveaux fichiers doivent être donner relativement=		Dans les logs Rsync les chemins vers les nouveaux fichiers doivent être donner '''relativement au répertoire des images originales''' (option {{cmd\|imgDir}}). Pour obtenir ce comportement, il faut que Rsync soit lancé depuis le répertoire {{path\|imgDir}}. Par exemple, si le répertoire des images originales est {{path\|/home/mdia/imgdir}}. Le résultat dans le log Rsync est :
	au répertoire des images originales (option imgDir). Pour obtenir ce comportement, il faut que
	Rsync soit lancé depuis le répertoire « imgDir ».		<syntaxhighlight lang="text">
	~~Exemple : Le~~ répertoire des ~~image originale~~ est /home/mdia/imgdir. Le résultat dans le log Rsync
	est :
	building file list ... done		building file list ... done
	./		./
Ligne 72 :		Ligne 70 :
	cosmos/cloud.jpg		cosmos/cloud.jpg
	cosmos/comet.jpg		cosmos/comet.jpg
			</syntaxhighlight>
	Dans cette exemple le fichier à ligne 4 se trouvent sur le disque à l'emplacement		Dans cette exemple le fichier à ligne 4 se trouvent sur le disque à l'emplacement
	« /home/mdia/imgdir/cosmos/blue-marble-west.jpg ».		« /home/mdia/imgdir/cosmos/blue-marble-west.jpg ».
	# À chacun de ses passages l'utilitaire ~~JAVA~~ tente de gérer tout les images qui sont indiquées
	comme nouvelles. De ce fait, après chaque passage, il faudrait vider ou archiver le fichier de log		== Vidage des logs ==
	de Rsync. Ainsi, lors du prochain lancement, le fichier de log ne contiendra que les fichiers qui ont		{{important\|À chacun de ses passages l'utilitaire [[Java]] tente de gérer tout les images qui sont indiquées comme nouvelles. De ce fait, après chaque passage, il faudrait '''vider ou archiver le fichier de log''' de Rsync. Ainsi, lors du prochain lancement, le fichier de log ne contiendra que les fichiers qui ont été ajouté depuis le dernier passage}}
	été ajouté depuis le dernier passage.

	=== Exemple d'utilisation de l'utilitaire de pré-traitement ==		=== Exemple d'utilisation de l'utilitaire de pré-traitement ==

Groche : /* Pré-traitement des images */ formatage aide

2012-05-03T10:49:11Z

Pré-traitement des images : formatage aide

← Version précédente		Version du 3 mai 2012 à 10:49
Ligne 42 :		Ligne 42 :
	# L'ensemble des versions d'images pré-traitées est contenue dans un unique dossier, ici {{path\|img-preparees}}.		# L'ensemble des versions d'images pré-traitées est contenue dans un unique dossier, ici {{path\|img-preparees}}.
	== Pré-traitement des images ==		== Pré-traitement des images ==
	Dans le cas particulier de l'application bmg/notix, initialement la totalité des images a déjà été pré-		Dans le cas particulier de l'application bmg/notix, initialement la totalité des images a déjà été pré-traiter. Cependant, en fonction de l’évolution du projet, des images supplémentaires s'ajoutent via le système de synchronisation [[Rsync]]. Le travail consiste à automatiser la tâche de pré-traitement des images nouvellement ajoutées.
	traiter. Cependant, en fonction de l’évolution du projet, des images supplémentaires s'ajoutent via
	le système de synchronisation Rsync. Le travail consiste à automatiser la tâche de pré-traitement
	des images nouvellement ajoutées.
	AJLSM propose dans ce pack un utilitaire JAVA capable d'analyser les logs Rsync et d'effectuer		AJLSM propose dans ce pack un utilitaire JAVA capable d'analyser les logs Rsync et d'effectuer
	automatiquement le pré-traitement des images transférées. C'est le fichier « processImage-		automatiquement le pré-traitement des images transférées. C'est le fichier
	bin.jar »		{{path\|processImage-bin.jar}}.
	Cet utilitaire est auto-documenté. Pour accéder à l'aide il faut le lancer avec l'option « -h » ou « --
	help »		Cet utilitaire est auto-documenté. Pour accéder à l'aide il faut le lancer avec l'option « {{cmd\|-h}} » ou «
			{{cmd\|--help}} » :
			<syntaxhighlight lang="bash">
	$ java -jar processimages-bin.jar --help		$ java -jar processimages-bin.jar --help
	usage: java -jar processimages-bin.jar --imgDir \| --pDir \| --rFile		usage: java -jar processimages-bin.jar --imgDir \| --pDir \| --rFile [options]
	[options]		-h,--help Afficher l\'aide
	-h,--help		-i,--imgDir <imgDir> Chemin absolue vers le répertoire des images originales
	Afficher l'aide		-p,--pDir <pDir> Chemin absolue vers le répertoire des images préparées
	-i,--imgDir <imgDir> Chemin absolue vers le répertoire des images originales		-r,--rFile <rFile> Chemin absolue vers le fichier de log rsync à analyser
	-p,--pDir <pDir>		-x,--py <arg> [optionnel] Chemin absolue vers le script python de pré-traitement (fichier pretraitement_images_plus.py)
	Chemin absolue vers le répertoire des images préparées		</syntaxhighlight>
	-r,--rFile <rFile>
	Chemin absolue vers le fichier de log rsync à analyser
	-x,--py <arg>
	[optionnel] Chemin absolue vers le script python de pré-traitement (fichier
	pretraitement_images_plus.py)
	=== NB ===		=== NB ===
	# Dans les logs Rsync les chemins vers les nouveaux fichiers doivent être donner relativement		# Dans les logs Rsync les chemins vers les nouveaux fichiers doivent être donner relativement=
	au répertoire des images originales (option imgDir). Pour obtenir ce comportement, il faut que		au répertoire des images originales (option imgDir). Pour obtenir ce comportement, il faut que
	Rsync soit lancé depuis le répertoire « imgDir ».		Rsync soit lancé depuis le répertoire « imgDir ».
Ligne 83 :		Ligne 79 :
	été ajouté depuis le dernier passage.		été ajouté depuis le dernier passage.

	=== Exemple d'utilisation de l'utilitaire de pré-traitement ===		=== Exemple d'utilisation de l'utilitaire de pré-traitement ==
	L’utilitaire à besoin du script « pretraitement_images_plus.py » pour fonctionner. Si ce dernier		L’utilitaire à besoin du script « pretraitement_images_plus.py » pour fonctionner. Si ce dernier=
	n'est pas présent dans le même répertoire, il faut spécifier son emplacement avec le paramétre		n'est pas présent dans le même répertoire, il faut spécifier son emplacement avec le paramétre
	optionnel « --py ».		optionnel « --py ».

Groche : création

2012-05-03T10:33:55Z

création

Nouvelle page

== Introduction ==
Ce fichier fait parti d'un pack d'installation réparti comme suit :
* {{path|processimage-bin.jar}} : exécutable java ;
* {{path|pre_traitement_images_plus.py}} : script python utilisé pour la transformation des images.
Ce document présente l'exploitation d'un système de pré-traitement d'une liste d'image à partir des logs Rsync.

== Les images pré-traitées ==
Pour fonctionner avec des images, une installations de Notix/bmg destinée à un large public, nécessite le pré-traitement préalable des images.
Ce pré-traitement consiste à préparer à l'avance les différentes versions d'images que l'application
peut offrir : {{var|miniatures}}, {{var|vignettes}}, plein format, images hidef, etc.
Pour cela, il suffit de créer les images au format voulu et de les stocker dans un dossier. Les images pré-traitées doivent porter le même nom que les images sources, de même que leur organisation en dossier et sous-dossier. Par exemple, pour un dossier source :
<syntaxhighlight lang="bash">
diskE
└── FRAD064003_IR0001
└── Biarritz_1
└── 3E18351
├── FRAD064007_3E18351_0001.JPG
├── FRAD064007_3E18351_0002.JPG
└── FRAD064007_3E18351_0003.JPG
</syntaxhighlight>

on devra avoir pour les vignettes et les miniatures :
<syntaxhighlight lang="bash">
img-preparees
├── vignette
│ └── FRAD064003_IR0001
│ └── Biarritz_1
│ └── 3E18351
│ ├── FRAD064007_3E18351_0001.JPG
│ ├── FRAD064007_3E18351_0002.JPG
│ └── FRAD064007_3E18351_0003.JPG
└── miniature
└── Biarritz_1
└── 3E18351
├── FRAD064007_3E18351_0001.JPG
├── FRAD064007_3E18351_0002.JPG
└── FRAD064007_3E18351_0003.JPG
</syntaxhighlight>
À noter dans cet exemple :
# Chaque version d'images pré-traitées possède une '''arborescence identique''' à celle des images sources ;
# Chaque version d'images pré-traitées est contenue dans un dossier distinct dont le nom est celui de la version correspondante (miniature, vignette, etc.);
# L'ensemble des versions d'images pré-traitées est contenue dans un unique dossier, ici {{path|img-preparees}}.
== Pré-traitement des images ==
Dans le cas particulier de l'application bmg/notix, initialement la totalité des images a déjà été pré-
traiter. Cependant, en fonction de l’évolution du projet, des images supplémentaires s'ajoutent via
le système de synchronisation Rsync. Le travail consiste à automatiser la tâche de pré-traitement
des images nouvellement ajoutées.
AJLSM propose dans ce pack un utilitaire JAVA capable d'analyser les logs Rsync et d'effectuer
automatiquement le pré-traitement des images transférées. C'est le fichier « processImage-
bin.jar »
Cet utilitaire est auto-documenté. Pour accéder à l'aide il faut le lancer avec l'option « -h » ou « --
help »
$ java -jar processimages-bin.jar --help
usage: java -jar processimages-bin.jar --imgDir | --pDir | --rFile
[options]
-h,--help
Afficher l'aide
-i,--imgDir <imgDir> Chemin absolue vers le répertoire des images originales
-p,--pDir <pDir>
Chemin absolue vers le répertoire des images préparées
-r,--rFile <rFile>
Chemin absolue vers le fichier de log rsync à analyser
-x,--py <arg>
[optionnel] Chemin absolue vers le script python de pré-traitement (fichier
pretraitement_images_plus.py)
=== NB ===
# Dans les logs Rsync les chemins vers les nouveaux fichiers doivent être donner relativement
au répertoire des images originales (option imgDir). Pour obtenir ce comportement, il faut que
Rsync soit lancé depuis le répertoire « imgDir ».
Exemple : Le répertoire des image originale est /home/mdia/imgdir. Le résultat dans le log Rsync
est :
building file list ... done
./
cosmos/
cosmos/blue-marble-west.jpg
cosmos/cloud.jpg
cosmos/comet.jpg
Dans cette exemple le fichier à ligne 4 se trouvent sur le disque à l'emplacement
« /home/mdia/imgdir/cosmos/blue-marble-west.jpg ».
# À chacun de ses passages l'utilitaire JAVA tente de gérer tout les images qui sont indiquées
comme nouvelles. De ce fait, après chaque passage, il faudrait vider ou archiver le fichier de log
de Rsync. Ainsi, lors du prochain lancement, le fichier de log ne contiendra que les fichiers qui ont
été ajouté depuis le dernier passage.

=== Exemple d'utilisation de l'utilitaire de pré-traitement ===
L’utilitaire à besoin du script « pretraitement_images_plus.py » pour fonctionner. Si ce dernier
n'est pas présent dans le même répertoire, il faut spécifier son emplacement avec le paramétre
optionnel « --py ».
La ligne de commande pour lancer le pré-traitement est :
java -jar processimages-bin.jar \
--rFile=/home/mdia/imgdir/res-rsync.txt \
--pDir=/home/mdia/img-prepared-dir \
--imgDir=/home/mdia/imgdir \
--py=/home/mdia/projets/bin/pretraitement_images_plus.py

{{remarque|L'utilitaire produit lors de son exécution des logs. Ces logs peuvent être intéressent pour suivre l’évolution de la tâche ainsi que les éventuels problèmes. On conseille de stocker ces logs en effectuant une redirection de la sortie standard vers un fichier}}

Doc/BM-Grenoble/Prétraitrement des images - Historique des versions

Groche : /* Chemins des fichiers */ typo

Groche : ajout catégories

Groche : /* = Exemple d'utilisation */ formatage

Groche : /* Vidage des logs */ h3

Groche : /* NB */ Chemins des fichiers Vidage des logs

Groche : /* Pré-traitement des images */ formatage aide