Discussion :

[Didou139]

Bonjour à tous,

J'ai cherché mais n'ai pas trouvé, d'où ce message :

J'ai une grande table (75 colonnes x 50 000 000 lignes avec une clé primaire ID autoincrémentée, des clés étrangères et d'autres types de données) dont je veux extraire des parties pour les traiter par ailleurs. Je cherche à générer des sous parties pour faciliter la gestion des fichiers de données (si j'ai 2 000 000 de lignes à extraire, je voudrais en faire 10 sous parties de 200 000 lignes). Ces 2 000 000 de lignes sont réparties dans la table si bien que je ne connais pas ou elles se situent précisément.

Mon idée était de passer par une table temporaire dans laquelle j'aurais renseigné les ID correspondant au début de chaque centaine de milliers de données correspondant aux sous parties. Cette table m'aurait permis de générer les limites de ma requête de sélection de mes sous parties pour les exporter. Par ailleurs, je n'ai pas envie (vu les volumes de données) de remplir une autre table avec l'ensemble des données que je viderai au fur et à mesure (même si c'est une possibilité), je préfèrerai faire autrement.

J'ai essayé différents codes mais rien ne fonctionne.

En clair, j'ai une table avec :
Id (int), Mach_num (int), x, y, z...

d'ou je voudrais tirer une autre table résultat :
Sous_partie_N° id_début
1 3157825
2 4159250
3 6584253

et ainsi de suite (chaque sous partie - par exemple entre 3157825 et 4159250 -correspondant à 200000 enregistrements).

Je vous remercie par avance de votre aide

[rudib]

Hello,

si tu veux juste découper ta table logiquement, tu peux utiliser une fonction de partitionnement, disponible depuis SQL Server 2005 :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
SELECT NTILE(10) OVER (ORDER BY NEWID()) as [partition]
...

attention, c'est lent... mais retourner toutes tes lignes, c'est lent aussi.

[Didou139]

Bonjour Rudib,

Merci beaucoup, effectivement cela fonctionne. Par contre, je souhaiterais définir non pas le nombre de partitions mais le nombre de lignes à l'intérieur des partitions, parce que je ne connais pas forcément le nombre total de lignes.

[rudib]

Quelle version de SQL Server stp ?
en 2012 tu peux utiliser OFFSET FETCH :
http://technet.microsoft.com/fr-fr/l.../gg699618.aspx

[Didou139]

J'utilise 2008R2 et 2012.

Je vais regarder ça. Merci encore.

[rudib]

Pour 2008R2 (avec une vue système de catalogue comme table exemple) :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
DECLARE @nb int, @offset tinyint
 
SET @nb = 1000
SET @offset = 0
 
WITH cte AS (
	SELECT ROW_NUMBER() OVER (ORDER BY object_id) as rownum, *
	FROM sys.objects
)
SELECT TOP (@nb) *
FROM cte
WHERE rownum > (@offset * @nb)