IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

MS SQL Server Discussion :

Importer partiellement des données d'une base vers une autre.


Sujet :

MS SQL Server

  1. #1
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut Importer partiellement des données d'une base vers une autre.
    Bonjour,

    Comme indiqué dans mon titre, je souhaiterais importer des données d'une base "mère" vers une base "fille".
    Par exemple, la base mère contient tous les produits du Monde, et j'aimerais importer dans ma base fille que les produits de la France, qui se trouvent dans la base Monde.

    Le soucis c'est que les noms des tables ne correspondent pas forcement et que j'ai des contraintes (logique) au niveau des Foreign Key.

    J'ai commencé par regarder dans la table ''Langue" l'ID rattaché à la France (IdLangue), et fait une requête système pour connaitre toutes les tables qui ont cet IdLangue dans leur table ... et ainsi de suite.
    Puis avec des curseurs, j'ai commencé à remplir les tables qui allaient bien quand ca ne posait pas de problèmes de contraintes.
    Le travail est plutôt long et fastidieux
    Est ce la bonne démarche ?

    Sinon j'ai pensé à virer toutes les contraintes sur les Foreign Keys et à importer mes données en masses mais ca peu peut être poser le soucis d'intégrité des données.


    Et ma question est :
    Quel est la meilleur façon de procéder dans ce cas ?

  2. #2
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    21 865
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 21 865
    Points : 53 021
    Points
    53 021
    Billets dans le blog
    6
    Par défaut
    La réplication peut être une solution....

    A +

  3. #3
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    Je m'y connais pas trop en réplication de base de donnée !

  4. #4
    Modérateur

    Homme Profil pro
    Développeur java, access, sql server
    Inscrit en
    Octobre 2005
    Messages
    2 711
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Val de Marne (Île de France)

    Informations professionnelles :
    Activité : Développeur java, access, sql server
    Secteur : Industrie

    Informations forums :
    Inscription : Octobre 2005
    Messages : 2 711
    Points : 4 792
    Points
    4 792
    Par défaut
    Il n'y a qu'une seule table à importer ?

  5. #5
    Modérateur

    Profil pro
    dba
    Inscrit en
    Janvier 2010
    Messages
    5 643
    Détails du profil
    Informations personnelles :
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : dba

    Informations forums :
    Inscription : Janvier 2010
    Messages : 5 643
    Points : 13 092
    Points
    13 092
    Par défaut
    Citation Envoyé par weebo Voir le message
    Le soucis c'est que les noms des tables ne correspondent pas forcement
    Les deux bases n'ont pas le même modèle ? ou est-ce seulement le nom des tables qui changent ?

    Et aussi :
    Voulez vous faire cela pour alimenter initialement votre base fille, qui sera ensuite indépendante, ou voulez vous pouvoir synchroniser les deux bases ultérieurement ?

  6. #6
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    Bonjour,

    Tout d'abord merci pour l'aide que vous pourrez m'apporter !

    Il n'y a pas qu'un seule table à importer !

    Les deux bases ont le même modèle mais certaines infos dans la base parente sont dispatchées dans plusieurs tables alors qu'il faudrait que je les regroupe dans la même table de la base fille.
    Exemple :
    - Base Parent :
    - Table produit :
    champs : IdProduit, toto, tata, id...

    - Table produitPays :
    champs : IdProduitPays, IdProduit, yoyo, truc, id...

    - Base Fille
    - Table produit :
    champs : IdProduit, toto, tata, yoyo, truc

    Le but de cette manœuvre est effectivement d'alimenter à un instant t une base fille, en fonction d'un critère sur la base de donnée générale.
    Puis cette base fille sera sur le poste Client et sera indépendante. Donc pas besoins de synchronisation (pour le moment)

  7. #7
    Modérateur

    Homme Profil pro
    Développeur java, access, sql server
    Inscrit en
    Octobre 2005
    Messages
    2 711
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Val de Marne (Île de France)

    Informations professionnelles :
    Activité : Développeur java, access, sql server
    Secteur : Industrie

    Informations forums :
    Inscription : Octobre 2005
    Messages : 2 711
    Points : 4 792
    Points
    4 792
    Par défaut
    En théorie, c'est facile.
    Il faut faire une requête avec les tables produit et produitPays de la base Parent
    pour insérer dans la table cible de la base fille :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    INSERT INTO Fille..produit (IdProduit, toto, tata, yoyo, truc)
    SELECT A.IdProduit, A.toto, A.tata, A.yoyo, A.truc
    FROM Parent..produit A INNER JOIN Parent..produitPays B
    ON A.IdProduit = B.IdProduit
    WHERE B.IdLangue = 'FR'
    C'est la syntaxe générale.
    Il faut adapter pour le pays (je ne sais pas où est IdLangue )

    ce serait bien mieux de mettre les vrais noms de tables et de colonnes ...

  8. #8
    Modérateur

    Profil pro
    dba
    Inscrit en
    Janvier 2010
    Messages
    5 643
    Détails du profil
    Informations personnelles :
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : dba

    Informations forums :
    Inscription : Janvier 2010
    Messages : 5 643
    Points : 13 092
    Points
    13 092
    Par défaut
    Citation Envoyé par weebo Voir le message
    - Base Parent :
    - Table produit :
    champs : IdProduit, toto, tata, id...

    - Table produitPays :
    champs : IdProduitPays, IdProduit, yoyo, truc, id...

    - Base Fille
    - Table produit :
    champs : IdProduit, toto, tata, yoyo, truc
    donc les bases n'ont pas le même modèle.
    Dans ces conditions, il me parait difficile de faire autrement qu'à la main, surtout si vous avez beaucoup de cas comme celui-ci (données d'une table dans la cible provenant de plusieurs tables dans la source...)

    en peuplant chaque table de votre base cible avec une requete dans votre table source, dans le bon ordre, afin de ne pas violer de contraintes d'intégrité.

    Combien de tables avez vous dans la cible ?

  9. #9
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    merci pour vos réponses !

    Népomucène => j'avais commencé à faire comme tu m'as dit, avec des curseurs pour chaque table ... mais le travail est long car j'ai pas mal de table à remplir en fonction de la langue qui n'est pas toujours spécifié dans la table de la base parente. Du coup, dans certains cas j'ai pas mal de jointure à faire.

    aieeeuuuuu => Les bases ont le "même" modèle sauf dans certains cas comme celui ci qui reste mineur.
    La base cible contient environ 70 tables .... *PAN*

  10. #10
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    J'ai commencé à regarder pour faire de la réplication de la base parente avec une condition (IdLangue = 2 - "FR")
    Mais le problème c'est qu'il me crée dans la base de donnée cible, les deux tables, or ce n'est pas ce que je veux.

    Du coup je suis en train de chercher s'il est possible de modifier le script de réplication lorsqu'il va chercher les données dans la table source pour les basculer dans la table cible, parce qu'en fait seulement quelques champs m'intéressent.
    il faudrait que je supprime la création de la table, ici ProduitPays, et que je bascule ses champs dans la table Produit. Mais ca je ne sais pas si c'est possible ?!

  11. #11
    Modérateur

    Profil pro
    dba
    Inscrit en
    Janvier 2010
    Messages
    5 643
    Détails du profil
    Informations personnelles :
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : dba

    Informations forums :
    Inscription : Janvier 2010
    Messages : 5 643
    Points : 13 092
    Points
    13 092
    Par défaut
    Dans ce cas, et puisque tu ne comptes pas synchroniser ultérieurement les deux bases, le simple est peu être maintenant de traiter ces cas particuliers à la main, en peuplant ta nouvelle table à partir des deux autres (avec le type de requête que t'as fourni Népomucène), et supprimer les deux anciennes tables ensuite...

    Dans tous les cas, il va être difficile de traiter de façon automatique des cas particuliers !

  12. #12
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    Ok donc, si je résume (pour ceux dont ca pourrait intéresser) :
    - Faire une réplication de la base principale en sélectionnant toutes les tables dont j'ai besoins.
    - Importer les données de la bdd source vers la bdd cible
    - Basculer les données de la table ProduitsPays vers la table produit
    - Supprimer la table ProduitsPays

    Le problème c'est qu'il faut recréer les champs dans la table Produit car la réplication va tout exploser ...

  13. #13
    Modérateur

    Profil pro
    dba
    Inscrit en
    Janvier 2010
    Messages
    5 643
    Détails du profil
    Informations personnelles :
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : dba

    Informations forums :
    Inscription : Janvier 2010
    Messages : 5 643
    Points : 13 092
    Points
    13 092
    Par défaut
    Citation Envoyé par weebo Voir le message
    Le problème c'est qu'il faut recréer les champs dans la table Produit car la réplication va tout exploser ...
    Vous pouvez avant cela
    1/ scripter votre table Produit "cible".
    2/ après la réplication, vous lancez le script, en changeant le nom de la table. (tmpProduit)
    3/vous peuplez la table tmpProduit
    4/vous supprimez les deux tables sources
    5/vous renommez tmpProduit en Produit

  14. #14
    Modérateur

    Homme Profil pro
    Développeur java, access, sql server
    Inscrit en
    Octobre 2005
    Messages
    2 711
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Val de Marne (Île de France)

    Informations professionnelles :
    Activité : Développeur java, access, sql server
    Secteur : Industrie

    Informations forums :
    Inscription : Octobre 2005
    Messages : 2 711
    Points : 4 792
    Points
    4 792
    Par défaut
    avec des curseurs pour chaque table
    C'est curieux que tu ais besoin de curseurs
    Il vaut mieux faire plusieurs requêtes ...

    Sinon, Talend propose un outil graphique spécialisé pour le transfert de données d'une base à l'autre
    permettant de filtrer les données, de choisir ses colonnes etc...

  15. #15
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    21 865
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 21 865
    Points : 53 021
    Points
    53 021
    Billets dans le blog
    6
    Par défaut
    Inutile d'utiliser Talend.... SSIS est livré avec SQL Server et possède beaucoup plus de fonctionnalités, plus rapide et mieux sécurisé pour ce faire.

    Ensuite pour faire ce genre de chose il y a un outil parfait, c'est service broker.
    SB est un système de messagerie de données pour faire des bases de données collaboratives, transactionnées, sécurisées, fiables et performantes.
    L'idée est d'envoyer dans une file d'attente les modif de la source à la cible par le biais de paquet XML représentant le flux de données.
    pour un court exemple voir : http://blog.developpez.com/sqlpro/p7...ervice-broker/

    A +

  16. #16
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    Merci pour vos réponses !

    Je vais m'orienter vers la solution d'aieuuuuu, qui est si j'ai bien compris :

    1 - Modifier le nom de ma table cible (tmpProduit)
    2 - Effectuer la réplication de la base source
    3 - Migrer les données des tables (tables créées par la réplication) dans la table tempo
    4 - Supprimer les 2 tables
    5 - Renommer ma table tempo

    Ça devrait rouler !!

    Népomucène => Je me suis mal exprimé. J'effectue une requête différente par table, et j'utilise des curseurs pour les remplir.

  17. #17
    Modérateur

    Homme Profil pro
    Développeur java, access, sql server
    Inscrit en
    Octobre 2005
    Messages
    2 711
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Val de Marne (Île de France)

    Informations professionnelles :
    Activité : Développeur java, access, sql server
    Secteur : Industrie

    Informations forums :
    Inscription : Octobre 2005
    Messages : 2 711
    Points : 4 792
    Points
    4 792
    Par défaut
    J'effectue une requête différente par table, et j'utilise des curseurs pour les remplir
    Si tu utilises des requêtes alors pourquoi utiliser des curseurs ?
    Cela dit, c'était une simple curiosité de ma part.
    L'important c'est que tu y arrives au moindre coût (solution d'aieuuuuu ...)

  18. #18
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    Parce que je stock certaines données dans ces curseurs que j'utilise après pour remplir mes tables, faire des conditions dessus ...

  19. #19
    Modérateur

    Homme Profil pro
    Administrateur de base de données
    Inscrit en
    Janvier 2005
    Messages
    5 826
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 43
    Localisation : France, Haute Garonne (Midi Pyrénées)

    Informations professionnelles :
    Activité : Administrateur de base de données
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Janvier 2005
    Messages : 5 826
    Points : 12 371
    Points
    12 371
    Par défaut
    Bonjour,

    Pour faire plus clair, les curseurs, c'est de la grosse m...
    C'est ce que je démontre ici.
    Donc quand vous écrivez de code SQL, et dans notre cas T-SQL, oubliez toute logique ligne-à-ligne comme on le fait dans les langages non déclaratifs.
    Traitez les données dans leur ensemble : SQL est conçu pour cela.

    Si vous ne voyez pas comment faire, postez le code de votre curseur

    @++

  20. #20
    Membre du Club
    Inscrit en
    Février 2011
    Messages
    87
    Détails du profil
    Informations forums :
    Inscription : Février 2011
    Messages : 87
    Points : 47
    Points
    47
    Par défaut
    Encore une question,

    Pour les réplications, je vois qu'il est possible de filtrer mais apparemment le filtre ne fonctionne que sur la table sélectionnée !
    Or je voudrais par exemple faire une réplication de la BDD en fonction d'un id (IdLangue =2) et toutes les données qui en découlent.

    Or dans mon cas je récupère quand même toutes les données ! sauf dans la table ou j'ai appliqué le filtre ?!

    Comment faire ?

+ Répondre à la discussion
Cette discussion est résolue.
Page 1 sur 2 12 DernièreDernière

Discussions similaires

  1. Dupliquer une requete d une base vers une autre
    Par adelsunwind dans le forum Requêtes et SQL.
    Réponses: 6
    Dernier message: 15/07/2010, 13h09
  2. [AC-2007] Copier une table depuis une base vers une autre
    Par Triton972 dans le forum VBA Access
    Réponses: 3
    Dernier message: 01/11/2009, 19h27
  3. Copier une requête d'une base vers une autre
    Par david71 dans le forum Requêtes et SQL.
    Réponses: 1
    Dernier message: 04/06/2008, 09h36
  4. Créer une vue dans une base vers une autre base ?
    Par guidav dans le forum Requêtes
    Réponses: 1
    Dernier message: 11/02/2008, 15h43
  5. export d'une table d'une base vers une autre
    Par VBBBA dans le forum Access
    Réponses: 2
    Dernier message: 04/09/2006, 17h47

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo