Discussion :

[tomy29]

Bonjour,

J'effectue un import de fichiers volumineux dans Access (via Delphi), je me suis aperçu que le temps d'imports de ces fichiers évolue de manière exponentielle.
Je me suis dit qu'il y avait peut etre un probleme au niveau des index, c'est a dire, qu'au fur et a mesure que j'insère des enregistrements, la table d'index (s'il y en a une, je ne sais pas. ) gonfle, et donc le parcours de cette table a chaque enrg à insérer devient de plus en plus long. Ce qui explique l'augmentation du temps au fur et a mesure que la taille de la base augmente.

Je voudrais savoir s'il y a un moyen d'optimiser tout ça. Sous oracle en faisant un Analyze ca permet un net gain de temps. Peut on faire de meme sous Access?

Merci.

[tee_grandbois]

Bonsoir,
la succession de suppressions et d'ajouts dans des tables Access et (notamment lors d'importation de données) fait grossir la base de façon importante. Tu dois donc faire un compactage de ta base régulièrement ou cocher l'option compacter lors de la fermeture.

[tomy29]

Bonsoir,
la succession de suppressions et d'ajouts dans des tables Access et (notamment lors d'importation de données) fait grossir la base de façon importante. Tu dois donc faire un compactage de ta base régulièrement ou cocher l'option compacter lors de la fermeture.

J'utilise déjà le compactage entre l'import de chaque fichier. Mais cela ne semble pas suffisant. Aucun autre moyen d'améliorer les performances?

pour info quand j'insere 26 fichiers de
20000 lignes j'obtiens un ratio de 27 lignes par seconde
50000 lignes j'obtiens un ratio de 21 lignes par seconde
100000 lignes j'obtiens un ratio de 16 lignes par seconde

ce qui tend à prouver que la taille de la base influe sur le temps d'insertion d'un enregistrement.

[micniv]

Je ne sais pas si ça marchera ici :
lorsqu'on fait des imports volumineux il peut être très efficace de supprimer tous les index de la table destination (et de les recréer lorsque l'import est terminé)

Nice day,

[random]

tu es en mode exclusif pour des imports aussi volumineux ?

[tomy29]

tu es en mode exclusif pour des imports aussi volumineux ?

Qu'est ce que tu entends par mode exclusif? si je suis le seul sur la base?

[tomy29]

Je ne sais pas si ça marchera ici :
lorsqu'on fait des imports volumineux il peut être très efficace de supprimer tous les index de la table destination (et de les recréer lorsque l'import est terminé)

Nice day,

c'est une solution qui peut etre envisagée, je vais tester. mais vu le nombre d'index, ca va etre coton de tout recreer ensuite!

[random]

pas tant que ca par programme tu vas chercher dans les tabledefs les indexes, tu les sauvegardes dans un tableau tampon, et les supprimes
tu importes et tu les recrées par resturation du tableau tampon

ce qui ralentit aussi c'est l'intégrité référentielle
quand on a de très gros volumes à importer régulièrement il peut être préférable de renoncer à l'intégrité et de la vérifier de façon dynamique

[tomy29]

pas tant que ca par programme tu vas chercher dans les tabledefs les indexes, tu les sauvegardes dans un tableau tampon, et les supprimes
tu importes et tu les recrées par resturation du tableau tampon

ce qui ralentit aussi c'est l'intégrité référentielle
quand on a de très gros volumes à importer régulièrement il peut être préférable de renoncer à l'intégrité et de la vérifier de façon dynamique

ok, je vais me pencher sur la facon de procéder depuis Delphi. Ce n'est pas gagné.