IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Administration Oracle Discussion :

Import de table partitionnée très lent


Sujet :

Administration Oracle

  1. #1
    Membre habitué
    Homme Profil pro
    Administrateur de base de données
    Inscrit en
    Décembre 2006
    Messages
    142
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Isère (Rhône Alpes)

    Informations professionnelles :
    Activité : Administrateur de base de données
    Secteur : Conseil

    Informations forums :
    Inscription : Décembre 2006
    Messages : 142
    Points : 130
    Points
    130
    Par défaut Import de table partitionnée très lent
    Bonjour,

    suite à un post précédent j'ai fait un test d'import d'une grosse table non partitionnée dans le dump (248 colonnes - 9 M lignes) mais partitionnée avec 1 seule partition dans la base de destination (Oracle 9.2.0.4.0 sur Windows server 2003).

    Cette table a donc été créée avant l'import avec l'ordre suivant :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
     
    CREATE TABLE INGRID
    (
       COL1 NUMBER,
       COL2 NUMBER,
       ....
    )
    TABLESPACE TAB_INGRID
    PARTITION BY RANGE(COL1,COL2)
    (
        PARTITION PART_MAX 
        VALUES LESS THAN (MAXVALUE,MAXVALUE)
    ) ;
    Cet import prend plus de 15 h alors que si la table reste non partitionnée cela prend 1h1/2 !!!
    Je ne comprend pas cette augmentation de temps... Si quelqu'un a une idée ?

    Merci.

  2. #2
    Membre éprouvé Avatar de 13thFloor
    Homme Profil pro
    DBA Oracle freelance
    Inscrit en
    Janvier 2005
    Messages
    670
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 58
    Localisation : France

    Informations professionnelles :
    Activité : DBA Oracle freelance

    Informations forums :
    Inscription : Janvier 2005
    Messages : 670
    Points : 945
    Points
    945
    Par défaut
    10 fois plus de temps ! Les caractéristiques sont les mêmes pour les 2 imports : mode logging/nologging, mêmes index sur les tables, mêmes options d'import, tablespace de la table partitionnée sur le même disque que l'autre table ... ?
    Prend quelques snapshots avec statspack pour voir quelles attentes se produisent.
    En important dans une table partitionnée il y a un léger temps de recherche destiné à la détermination de la bonne partition mais là il n'y en a qu'une.
    Curieux.

  3. #3
    Expert éminent sénior
    Avatar de orafrance
    Profil pro
    Inscrit en
    Janvier 2004
    Messages
    15 967
    Détails du profil
    Informations personnelles :
    Âge : 47
    Localisation : France

    Informations forums :
    Inscription : Janvier 2004
    Messages : 15 967
    Points : 19 075
    Points
    19 075
    Par défaut
    à chaque insert un algorithme recherche la partition dans laquelle mettre les blocs et met en branle toute la gestion de l'espace spécifique au partitionnement... il parait assez logique de voir se genre de comportement

  4. #4
    Membre expert
    Avatar de LeoAnderson
    Profil pro
    Inscrit en
    Septembre 2004
    Messages
    2 938
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Septembre 2004
    Messages : 2 938
    Points : 3 199
    Points
    3 199
    Par défaut
    De plus, je cerne mal l'intérêt d'un tel partitionnement ?

  5. #5
    Expert éminent sénior
    Avatar de orafrance
    Profil pro
    Inscrit en
    Janvier 2004
    Messages
    15 967
    Détails du profil
    Informations personnelles :
    Âge : 47
    Localisation : France

    Informations forums :
    Inscription : Janvier 2004
    Messages : 15 967
    Points : 19 075
    Points
    19 075
    Par défaut
    éviter d'avoir des imports trop rapides peut-être

  6. #6
    Membre expert
    Avatar de LeoAnderson
    Profil pro
    Inscrit en
    Septembre 2004
    Messages
    2 938
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Septembre 2004
    Messages : 2 938
    Points : 3 199
    Points
    3 199
    Par défaut



  7. #7
    Membre habitué
    Homme Profil pro
    Administrateur de base de données
    Inscrit en
    Décembre 2006
    Messages
    142
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Isère (Rhône Alpes)

    Informations professionnelles :
    Activité : Administrateur de base de données
    Secteur : Conseil

    Informations forums :
    Inscription : Décembre 2006
    Messages : 142
    Points : 130
    Points
    130
    Par défaut
    Les caractéristiques sont les mêmes, aussi bien en disque qu'en tablespace et options d'import.
    Quant à l'interêt d'une seule partition c'était pour tester si cela changeait quelque chose d'en mettre une seule, quitte à recréer les autres après l'import. Je pensais que cela évitait à Oracle la recherche de la bonne partition, vu qu'il n'y en a qu'une...
    Sinon il y a 18 partitions de prévues (une par mois).
    Je vais re-tester sans les index pour voir.

  8. #8
    Expert éminent sénior
    Avatar de orafrance
    Profil pro
    Inscrit en
    Janvier 2004
    Messages
    15 967
    Détails du profil
    Informations personnelles :
    Âge : 47
    Localisation : France

    Informations forums :
    Inscription : Janvier 2004
    Messages : 15 967
    Points : 19 075
    Points
    19 075
    Par défaut
    dans ce cas, crées tout de suite les 18 partitions et parallélise l'import (tu peux utiliser QUERY )... là ça peut devenir très intéressant

  9. #9
    Membre habitué
    Homme Profil pro
    Administrateur de base de données
    Inscrit en
    Décembre 2006
    Messages
    142
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Isère (Rhône Alpes)

    Informations professionnelles :
    Activité : Administrateur de base de données
    Secteur : Conseil

    Informations forums :
    Inscription : Décembre 2006
    Messages : 142
    Points : 130
    Points
    130
    Par défaut
    tu veux dire faire plusieurs exports avec des paramètres query contigüs et ensuite lancer les exports simultanemént sur chaque dump ?

    Sinon le test avec l'import sans les index a été concluant. En fait je créais les index locaux avant l'import pour éviter leur création automatique en global lors de celui-ci. Je pensais que lors d'un import les index étaient mis à jour globalement à la fin de du remplissage de la table, ce qui me paraissait normal pour la perfromance. Manifestement ça n'est pas le cas !
    Je vais relancer l'import full cette nuit sans les index et avec toutes les partitions mais sans les index locaux. Je les créerai après l'import.

    Cdlt.

  10. #10
    Expert éminent sénior
    Avatar de orafrance
    Profil pro
    Inscrit en
    Janvier 2004
    Messages
    15 967
    Détails du profil
    Informations personnelles :
    Âge : 47
    Localisation : France

    Informations forums :
    Inscription : Janvier 2004
    Messages : 15 967
    Points : 19 075
    Points
    19 075
    Par défaut
    non un export mais plusieurs imports, un par partition dans l'idéal

  11. #11
    Membre habitué
    Homme Profil pro
    Administrateur de base de données
    Inscrit en
    Décembre 2006
    Messages
    142
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Isère (Rhône Alpes)

    Informations professionnelles :
    Activité : Administrateur de base de données
    Secteur : Conseil

    Informations forums :
    Inscription : Décembre 2006
    Messages : 142
    Points : 130
    Points
    130
    Par défaut
    suite ... (envoi involontaire)

    cela provenait bien de la construction de l'index pendant l'import. La fonction import ne le construit donc pas d'un seul coup à la fin du chargement de la table mais bel et bien au fur et à mesure, d'où la performance.
    Là l'import à pris moins de 4h sans les index puis 6h30 pour la construction de ceux-ci.

    Cdlt.

+ Répondre à la discussion
Cette discussion est résolue.

Discussions similaires

  1. [AC-2007] Requête très lente depuis table externe en BD SQLServer2008
    Par alfhcg dans le forum Requêtes et SQL.
    Réponses: 8
    Dernier message: 28/10/2011, 00h19
  2. export/import 9i d'une table partitionné
    Par breizh76 dans le forum Administration
    Réponses: 2
    Dernier message: 28/12/2009, 11h20
  3. Importation Excel très lente
    Par manon0118 dans le forum WinDev
    Réponses: 3
    Dernier message: 30/06/2009, 22h29
  4. Import de page JSP très lent
    Par jemini_fr dans le forum Servlets/JSP
    Réponses: 1
    Dernier message: 07/04/2008, 14h06
  5. Update trés lent sur une grosse table
    Par neo.51 dans le forum Oracle
    Réponses: 21
    Dernier message: 14/12/2005, 11h06

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo