Discussion :

[stylor]

Bonjour,

J'ai eu une expérience avec SSIS qui était bonne lors de ma précédente mission. Je souhaiterai savoir s'il existe un équivalent en open source. La société dans laquelle je suis actuellement est plutôt axé open source d'où ma question.
D'après mes recherches, je doute qu'il existe un équivalent. Faut avouer que SSIS est quand même bon et facilite pas mal de chose.

[Waldar]

Pour la question, les seuls ETL open source dont j'ai entendu parler sont Kettle Pentaho et Talend. Je ne les ai jamais utilisé mais c'est un point de départ.
Une petite recherche permet d'en trouver d'autres.

Par contre, je ne peux pas vous laisser dire que SSIS est bon !
C'est de loin le pire des ETL que j'ai côtoyé (parmi PowerCenter et OTIC / Genio).

• Client horriblement lent et peu réactif dès qu'on a trente boîtes à l'écran, avec des bugs dans tous les sens (des boîtes invisibles par exemple, qui existent mais avec lesquelles on ne peut plus interagir).
• On a le choix entre écrire du code ensembliste et donc rapide, ou utiliser les boîtes pré-faites et on se retrouve à faire du pseudo ligne à ligne.
• Quid des delete / truncates ? Il faut les écrire à la main.
• Les messages d'erreur quand les jobs plantent sont une plaisanterie.
  Si on n'a pas tout anticipé à l'avance, on n'a aucune idée de ce qui plante. Voici le message d'erreur type :

  Job has failed.

• Les syntaxes update à l'ODBC : Update MaTable set col1 = ?, col2 = ?, col3 = ?, col4 = ?, col5 = ? where col6 = ? and col7 = ?.
  Très amusant quand on arrive à quelques dizaines de colonnes.
• Trois mille options inutiles dans lesquelles se noient cinq options intéressantes.
• Les connecteurs pour Oracle étaient une plaisanterie avant 2011/2012 et les connecteurs Attunity ! Pour un ETL il fallait l'expliquer au client qu'ils ne devaient pas avoir d'Oracle.
• Typages des données contre intuitifs. Vous êtes déjà perdu avec la dizaine de types de données SQL ? SSIS vous en a pondu trente dont douze rien que pour gérer des nombres.
• SSIS se prononce saucisse en français.

SSIS c'est bien pour écrire des jobs de maintenance DBA, des packages simples d'échange de données ou piloter des procédures stockées.
Ne faites pas de décisionnel avec.

[Jester]

Je confirme pour Kettle et Talend c'est les 2 majeurs du domaine.

Je préfère Kettle qui est plus efficace mais un peu rustre, Talend étant plus indiqué pour ceux qui aiment les belles interfaces qui rament (je n'ai pas testé depuis l'an dernier par contre).

[stylor]

Je pense qu'aucun ETL n'est parfait. Sachant que c'est la partie la plus importante (avec la modélisation) dans un projet BI, ce n'est pas simple de développer un truc parfait.
A l'époque pour ce que j'en faisait, ça allait mais je suis d'accord qu'il n'est pas parfait. Je préfère SSIS que de devoir tout faire à la main en SQL, T_SQL, ...

[doc malkovich]

Je confirme pour Talend et Kettle, avec une petite préférence pour Talend.

Après les ETL se ressemblent tous, dans le sens où comme vous le dites ils permettent d'éviter des scripts sql à la main

SSIS se prononce saucisse en français.

mdr

[FabriceForce]

Bonjour,

J'utilise OTIC Genio depuis quelques années et je rejoins volontiers l'avis de Waldar, par contre je serais curieux de savoir en quoi PowerCenter peut poser problème ?

[Waldar]

C'est SSIS qui pose problème, ni OTIC / Génio, ni PowerCenter même si on trouve des reproches à faire dans ces deux ELT / ETL.

[nap5nap5]

Bonjour à tous,

Pour continuer ce post, je vous livre brièvement mon choix.

ETL utilisés:
- Informatica Power Center (propriétaire)
- Datastage 7.1 (payant)
- Talend (open source)
- Pentaho (ex Kettle) (open source)
- Formé à Oracle Data Integrator (ODI) et à SAP Data Integrator (ex Bodi)
Tous 2 propriétaires.

Le plus simple: Kettle (manque de puissance en version gratuite). Son moteur serait à changer pour lui donner toute la puissance qu'il mérite.

Le plus intuitif: Bodi

Le plus puissant : Bodi (c'est la rolls, utilisé par certains grands groupes et bourses)

Kettle et Talend (en version payante) sont quasiment identiques en performances.

ODI et Datastage sont compliqués d'utilisations. Je m'y perdais dans les modules à utiliser pour ODI. Je refuse d'utiliser ODI.

Informatica a sa logique, quand elle est comprise, il est simple et rapide et puissant.

ODI est très présent dans les entreprises françaises, mais à chaque évolution une nouvelle interface.

Mon ordre de préférence est:
BODI
Kettle
Informatica
Talend
-- et loin derrière --
Datastage
puis
ODI (ferme la marche!)

Pour moi, l'avantage de Datastage est dans le changement des environnements et à distance.

L'ETL Ab Initio est aussi considérer comme une rolls. Je l'ai vu à l'oeuvre chez OBS (Orange Business Service) dans la version gratuite. Très puissant et relativement facile d'utilisation quand il est maitrisé. Je n'ai pas eu accès à Ab Initio dans sa version payante.

C'est tout pour aujourd'hui!

A bientôt.

[doc malkovich]

Pour moi ODI est en tête et non en fin du palmarès
J'avais fait un billet dessus dans le temps.

C'est un ETL pas forcément très simple d'utilisation mais on se rend compte qu'il est très bien foutu quand on passe du temps dessus