IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Développement de jobs Discussion :

Stockage temporaire


Sujet :

Développement de jobs

  1. #1
    Membre régulier Avatar de SebastienM
    Profil pro
    Inscrit en
    Juin 2007
    Messages
    310
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Juin 2007
    Messages : 310
    Points : 86
    Points
    86
    Par défaut Stockage temporaire
    Bonjour,

    Est-il possible de rediriger la sortie d'un tMap dans un espace temporaire (sans passer par un fichier) ?
    Car je dois faire plusieurs liens en entrée et agréger les données en sortie, et je ne vois pas d'autres méthode.

    merci.

  2. #2
    Membre averti Avatar de bouvda
    Profil pro
    Inscrit en
    Octobre 2005
    Messages
    252
    Détails du profil
    Informations personnelles :
    Âge : 39
    Localisation : France, Rhône (Rhône Alpes)

    Informations forums :
    Inscription : Octobre 2005
    Messages : 252
    Points : 318
    Points
    318
    Par défaut
    Bonjour, il y a des composants qui permettent de remplir et de lire un tableau en mémoire, je ne les ai jamais testés mais je pense que tu pourras faire ce que tu veux avec.
    Par défaut, il sont cachés et ne sont donc pas accessibles par défaut dans la palette. Pour les afficher, il faut aller dans Window -> Preferences -> Talend -> Designer et cocher Display hidden components(need restart) et comme indiqué il faut ensuite redémarrer Talend.
    Tu verras alors dans la catégorie Misc de la palette deux nouveaux composants :
    - tArray : remplit un tableau
    - tArrayIn : lit un tableau

    Cependant, je pense qu'il faut faire attention car s'il y a énormément de données il faut beaucoup de mémoire. Enfin il y a le temps de voir venir quand même.

  3. #3
    Membre averti Avatar de bouvda
    Profil pro
    Inscrit en
    Octobre 2005
    Messages
    252
    Détails du profil
    Informations personnelles :
    Âge : 39
    Localisation : France, Rhône (Rhône Alpes)

    Informations forums :
    Inscription : Octobre 2005
    Messages : 252
    Points : 318
    Points
    318
    Par défaut
    Je viens de tester et j'ai rencontré un problème. Les classes utilisées pour les lignes des tableaux ne sont pas les mêmes pour tArray et tArrayIn.
    J'ai donc modifié rapidement le composant tArrayIn : il faut donc maintenant lui ajouter le nom de la classe. Le nom de la classe pour tArrayIn doit être le nom du lien entrant de tArray suivi de Struct.
    Par exemple :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
     
    tRowGenerator--------------->tArray
             |             row1
             |
             |ThenRun
             |
             v
         tArrayIn--------------->tLogRow
                            row2
    ici la propriété Class de tArrayIn doit prendre : row1Struct

    (Le lien pour télécharger le composant se situe un peu plus loin dans la discussion)

  4. #4
    Membre régulier Avatar de SebastienM
    Profil pro
    Inscrit en
    Juin 2007
    Messages
    310
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Juin 2007
    Messages : 310
    Points : 86
    Points
    86
    Par défaut
    Merci de ta réponse et de tes modifs .
    Maintenant je n'arrive aps à faire marcher le tdenormalize pour concaténer mes champs :il me dit qu'in ne peut pas convertir un entier en string et inversement.
    Je ne comprends pas trop quel schéma il faut mettre en entrée et en sortie...

  5. #5
    Membre averti Avatar de bouvda
    Profil pro
    Inscrit en
    Octobre 2005
    Messages
    252
    Détails du profil
    Informations personnelles :
    Âge : 39
    Localisation : France, Rhône (Rhône Alpes)

    Informations forums :
    Inscription : Octobre 2005
    Messages : 252
    Points : 318
    Points
    318
    Par défaut
    Citation Envoyé par SebastienM
    Merci de ta réponse et de tes modifs .
    De rien, ce n'est pas grand chose comme modifs .

    Citation Envoyé par SebastienM
    Maintenant je n'arrive aps à faire marcher le tdenormalize pour concaténer mes champs :il me dit qu'il ne peut pas convertir un entier en string et inversement.
    Je ne comprends pas trop quel schéma il faut mettre en entrée et en sortie...
    Dans ce cas, il faut se débrouiller pour avoir des String en entrée du tDenormalize en passant par un tMap ou un tJavaRow par exemple où les champs de la table en sortie seraient de la forme :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    output.champ1 = input.champ1.toString();
    si input.champ1 est un objet mais n'est pas de type String.

    En ce qui concerne le schéma de sortie, il s'agit du même que le schéma en entrée (donc il ne contient que des champs de type String) sauf que dans les champs agrégés (ceux qui ne sont pas utilisés dans la propriété Group By) il y a une concaténation des valeurs de tous les enregistrements.

    Par exemple :
    - si en entrée on a:
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
     
    ID | CHAMP1 | CHAMP2
    1  |    3   |    2
    1  |    5   |    2
    - en sortie on aura :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
     
    ID | CHAMP1 | CHAMP2
    1  |   3;5  |   2;2

  6. #6
    Membre régulier Avatar de SebastienM
    Profil pro
    Inscrit en
    Juin 2007
    Messages
    310
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Juin 2007
    Messages : 310
    Points : 86
    Points
    86
    Par défaut
    Effectivement c'etait un problème de type.

    J'obtiens le contenu suivant :
    ID_NUM_NATIONAL;ID_SERVICE;ID_SERVICE_PRO;ID_SERVICE_GEST
    12549;15;0;15
    12548;15;0;15
    12523;15;0,5;10,16
    12524;15;0;15
    12525;15;0;15

    mais je voudrais avoir juste cela :
    ID_NUM_NATIONAL;SORTIE
    12549;15,0,15
    12548;15,0,15
    12523;15,0,5,10,16

    Est-ce possible ?

    Merci.

  7. #7
    Membre averti Avatar de bouvda
    Profil pro
    Inscrit en
    Octobre 2005
    Messages
    252
    Détails du profil
    Informations personnelles :
    Âge : 39
    Localisation : France, Rhône (Rhône Alpes)

    Informations forums :
    Inscription : Octobre 2005
    Messages : 252
    Points : 318
    Points
    318
    Par défaut
    Citation Envoyé par SebastienM
    J'obtiens le contenu suivant :
    ID_NUM_NATIONAL;ID_SERVICE;ID_SERVICE_PRO;ID_SERVICE_GEST
    12549;15;0;15
    12548;15;0;15
    12523;15;0,5;10,16
    12524;15;0;15
    12525;15;0;15

    mais je voudrais avoir juste cela :
    ID_NUM_NATIONAL;SORTIE
    12549;15,0,15
    12548;15,0,15
    12523;15,0,5,10,16

    Est-ce possible ?
    En enchaînant sur un tMap ou tJavaRow c'est possible :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
     
    output.ID_NUM_NATIONAL = input.ID_NUM_NATIONAL;
    output.SORTIE = input.ID_SERVICE +","+ input.ID_SERVICE_PRO +","+ input.ID_SERVICE_GEST;
    Par contre tu risques d'avoir des problèmes avec les nombres à virgule (enfin à mon avis tu n'as que des entiers mais on sait jamais) si tu mets des virgules comme séparateurs.

  8. #8
    Membre régulier Avatar de SebastienM
    Profil pro
    Inscrit en
    Juin 2007
    Messages
    310
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Juin 2007
    Messages : 310
    Points : 86
    Points
    86
    Par défaut
    c'est justement ce que j'etais en train de faire ^^ tJavRow power

  9. #9
    Membre averti Avatar de bouvda
    Profil pro
    Inscrit en
    Octobre 2005
    Messages
    252
    Détails du profil
    Informations personnelles :
    Âge : 39
    Localisation : France, Rhône (Rhône Alpes)

    Informations forums :
    Inscription : Octobre 2005
    Messages : 252
    Points : 318
    Points
    318
    Par défaut
    Bonjour,

    le composant tArrayIn par défaut de Talend est utilisé dans les tAggregateRow. Par conséquent les modifications que j'ai apportées à ce composant causent une dysfonctionnement des tAggregateRow. Pour éviter ce désagrément, j'ai renommé le composant afin qu'il puisse cohabiter avec le tArrayIn par défaut. Voici la nouvelle version :my_tArrayIn.zip

  10. #10
    Nouveau membre du Club
    Profil pro
    Inscrit en
    Avril 2007
    Messages
    24
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Avril 2007
    Messages : 24
    Points : 27
    Points
    27
    Par défaut
    Bonjour,

    Bouvda, le composant tArray modifié est un bon moyen.

    Je me permet simplement de signaler qu'il existe également les composants tHashInput / tHashOutput dans les composants cachés qui peuvent certainement répondre à cette problématique.

    Michaël.

+ Répondre à la discussion
Cette discussion est résolue.

Discussions similaires

  1. Stockage temporaire de données
    Par BérengerC dans le forum Décisions SGBD
    Réponses: 4
    Dernier message: 25/02/2010, 09h41
  2. Stockage temporaire de données
    Par bruce207 dans le forum Débuter
    Réponses: 3
    Dernier message: 23/09/2008, 20h53
  3. [WD12] Stockage temporaire de données
    Par bruce207 dans le forum WinDev
    Réponses: 4
    Dernier message: 13/09/2008, 19h20
  4. Stockage temporaire dans la base
    Par yosraisi dans le forum Bases de données
    Réponses: 3
    Dernier message: 14/04/2008, 19h38
  5. Stockage temporaire de données
    Par Artusamak dans le forum Langage
    Réponses: 2
    Dernier message: 03/01/2008, 17h03

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo