Discussion :

[lc2ms1978]

Bonjour,

Je suis en train de développer un flux sous PDI. J'extrais des données à partir d'un fichier plat et je souhaite modifier les valeurs d'un champ de type texte (chaine de caractères) en les transcodant avant d'insérer le résultat dans une table en base.

L'opération de transcodification que je souhaite mettre en place est la suivante :
Si champ_a_modifier = 'TOTO' alors champ_a_modifier = 'TITI'
SINON SI champ_a_modifier = 'TITI' alors champ_a_modifier = 'TATA'
...
Sachant que j'ai un fichier (fichier_transco.csv) contenant les valorisations de la trancodification qui se présente sous la forme suivante :
colonne1 Colonne2
TOTO TITI
TITI TATA

Donc en gros le flux doit pour chaque ligne chercher une correspondance dans le fichier fichier_transco.csv en faisant matcher 'champ_a_modifier' avec 'colonne1'. Pour chaque correspondance il remplace 'champ_a_modifier' par colonne2 (ou créer une autre colonne).

Ce type de transformation (sorte de lookup renvoyant une valeur) existe t il dans PDI ?

Merci

[patrick21]

Bonjour,

La brique "recherche dans flux" devrait te permettre de construite ta lookup, par contre il serait peut être plus performant de charger ton fichier de transcodification dans une table temporaire et utiliser la brique "Recherche dans base de données"

[lc2ms1978]

Bonjour,

La brique "recherche dans flux" devrait te permettre de construite ta lookup, par contre il serait peut être plus performant de charger ton fichier de transcodification dans une table temporaire et utiliser la brique "Recherche dans base de données"

Bonjour Patrick,

Merci pour la réponse. Je revenais justement sur le post pour répondre à ma propre question et effectivement il s'agit bien de la transformation "recherche dans flux". En fait au début je ne la trouvais pas car je cherchais un nom contenant lookup.
Dans la version en anglais la tranformation s'appelle Stream lookup.
Par contre en l'utilisant j'ai eu quelques soucis. Comme mes informations de transco étaient stockées dans un fichier csv à l'exécution j'avais l'erreur suivante :
There was a data type error: the data type of java.lang.String object +[VIDE] does not correspond to value meta [String(30)<binary-string>

En fait pour résoudre le problème il faut décocher l'option "Conversion de type repoussée" dans la transformation d'extraction à partir du fichier csv (en anglais l'option s'appelle "Lazy Conversion?" je pense).

En ce qui concerne les perf mon fichier de transco comporte moins de 5000 lignes. Donc ca va pour le moment.

Merci en tous cas pour la réponse.