Discussion :

[souska]

Bonjour a tous,

Je suis entrain de réaliser l' étude comparatif des 2 ETL : Talend et Kettle.

Je suis à la phase de test des Lookup sur les deux ETL.

Sous Talend il n'y a aucun problème, mais sous Kettle je rencontre des problèmes et j'aimerais solliciter votre aide.


Pour vous expliquer, J'ai 3 tables :
T1 contenant 12 Colonnes
T2 contenant 12 Colonnes (identiques à celles de T1)
T3 contenant seulement 2colonnes

T1 et T3 ont une ligne renseignée alors que T2 est vide

La première colonne de T1 est renseignée avec une donnée identique à celle stockée dans la première colonne de T3

Je souhaiterais insérer dans T2 toutes les valeurs de T1, en utilisant un Lookup .
Toutes les données seront copiées à l'identique à l'exception de la donnée de la colonne10 (valorisé en récupérant la valeur de la colonne 2 de T3).

Pour cela, j'ai fait un truc tout simple :
J 'ai mis le composant "Extraction depuis table" (qui récupère les colonnes de T1 , je le relie à un autre composant "Recherche dans une base de données" (c'est ce que je vois comme Lookup, qui récupère les colonne de la T3), qui est relié au dernier composant "Insertion dans une Table" qui insère dans T2 .

A noter que dans le composant "Recherche dans une base de données", dans les clés de recherche j'ai mis " T3Colonne1 Like T1Colonne 1 "
et dans la valeur à retourner, j'ai mis dans champ " T3Colonne2"


Mais ça me donne une erreur "Colonne1_1 introuvable" (dans aucun endroit j'ai signaler la Colonne1_1).

Quelqu'un a une idée?

Merci

[souska]

Bonjour,

Peut être mon explication est pas claire.
Pour cela, quelqu'un peut me dire tout simplement comment utiliser les Lookups sous Kettle ?

Merci d'avance.

Souska

[MattCasters]

Peut-être j'ai pas envie de répondre 2 fois?

[souska]

Oui tu as raison

Et j'ai toujours pas trouver la solution
Et dans le guide de Kettle c'est pas bien expliquer

[MattCasters]

Bon, comme expliqué ici : http://wiki.pentaho.com/display/COM/...tion+in+Kettle

Talend a q'une seule manière de cherchez du data, a comparer avec notre etappe "Stream Lookup" : on charge toutes en mémoire.

Evidemment, c'est pas trop compliqué. Cherche l'example "samples/transformations/Stream lookup - basics.ktr".

Si tu essaye d'ajouter deux fois "Colonne1", Kettle va le renommer "Colonne1_1", "Colonne1_2", etc.

Bonne chance!

Matt

[souska]

Salut,

Matt, merci beaucoup pour ton aide.

J'ai mis en pièce jointe l'imprimer écran de ma transformation ainsi celle de mes tables.

Ce que j'asseye de faire c'est :
- Insérer dans la table TESTINSERT1 les informations qui sont dans la Table TESTINSERT, mais pour la colonne 9 (COLUMN9) je souhaite mettre l'information qui est dans la COLUMN1 du table TESTINSERT2 (qui est mon lookup) où le TESTINSERT.Column3 = TESTINSERT2.Column0

Est ce que je doit utiliser "Recherche dans flux"? ou un autre composant?
et comment le configurer ce composant.

Merci d'avance

Souska

[MattCasters]

Souska,

Clique droite sur "Insert table" : "Construire schéma de correspondance" (generate mapping).

Là tu peut choisir les champs a inserrer dans ta table.

Apres tu met L'étappe "Sélection valeurs" entre "Stream Lookup" et "Insert table".

HTH,

Matt

[souska]

merci beaucoup Matt,

ça marche comme ca,
mais il reste un tout petit problème
c'est que il copie bien les données
Mais pour la colonne 9, il me met a null tout les valeur sauf celle du MAN23D il me met 5
et moi je veut pas que les autres soit null mais qu'elle reste comme elle était dans la table TESTINSERT.

je pense que je doit mettre une condition quelque part.

merci

Souska

[MattCasters]

L'étappe Calculator a une function C=NVL(A,B);

Si A est null, C=B, autrement C=A.

Bonne chance,

Matt

[souska]

Merci Matt,

C'était exactement ça.
Mon problème est résolu.

merci beaucoup.

Souska

[cilia]

Bonjour Souska
Je suis en stage je travaille sur les ETL. En ce moment je compare les deux ETL Talend et Kettle afin de choisir le meilleur...
Pouvez me communiquer votre travail de comparaison Merci
Cilia