Discussion :

[vincent62149]

Bonjour à tous.

Dans l'application que je développe en VB.NET avec une BDD SQL SERVER, je reçois un fichier CSV dont je dois insérer les informations dans ma BDD.

Le fichier CSV a comme entete les valeurs Champ1, champ2,champ3, ...
Lorsque j'insère mes données, la table de ma BDD attend les valeurs des champs 1, 2, 3, ... à la suite.

Mais imaginons que la structure de mon fichier CSV est modifiée (pourquoi faire simple quand on peut faire compliqué ...) et qu'il prend la forme champ1, champ3, champ2, ... Bref, que l'ordre des colonnes est modifié.

Comment puis-je faire pour que mon application repère le plus automatiquement possible le changement d'ordre des colonnes et qu'elle puisse alerter l'utilisateur et lui demander de choisir parmi les colonnes présentes dans le CSV quelle est la bonne et d'insérer les valeurs correspondantes ?

Tout celà sachant que mon supérieur n'a pas envi de s'embeter avec changer l'ordre des colonnes physiquement dans le fichier CSV

J'espere avoir été clair ...


Cordialement,

Vincent

[Sacha999]

- T'ouvre ton fichier au format texte
- Tu lis la première ligne
- Tu sais si c'est dans le bon ordre, sinon tu le split et tu proposes au gars la liste des champs dispo

[tomlev]

Tu lis la première ligne pour avoir les noms des champs dans l'ordre
Tu crées une DataTable, et tu ajoutes une colonne par champ défini dans l'en-tête
Tu lis chaque ligne du fichier, tu la splites selon le séparateur CSV, et tu mets les valeurs dans les colonnes de la table en accédant aux colonnes par index (et non pas par nom)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
Dim table As New DataTable()
Using reader As New StreamReader(cheminDuFichier)
 
    Dim header As String = reader.ReadLine()
    Dim columnNames As String() = header.Split(";")
    For Each columnName As String In columnNames
        table.Columns.Add(columnName, GetType(String))
    Next
 
    Dim line As String = reader.ReadLine()
    While line IsNot Nothing
 
        Dim fields As String() = line.Split(";")
        Dim row As DataRow = table.NewRow()
        For i As Integer = 0 To fields.Length - 1
            row(i) = fields(i)
        Next
 
        line = reader.ReadLine()
    End While
 
End Using

A la fin, la DataTable contient toutes les valeurs dans les colonnes correspondantes, tu n'as plus qu'à les insérer en base...

[vincent62149]

Merci à vous 2 et en particulier a tomlev

Le code que tu m'as donnée est parfait pour extraire les données du fichier pour les mettres en 'virtuel' avant de les insérer. Je l'avais déja écrit mais en beaucoup moins propre et en utilisant des tableaux car je ne connaissais pas l'utilisation des Datatable ...

Mais imagine que la colonne du fichier CSV ait son nom qui a été changé par une personne. Je ne pourrai plus faire la comparaison pour insérer dans ma BDD. Non ?

[tomlev]

Mais imagine que la colonne du fichier CSV ait son nom qui a été changé par une personne. Je ne pourrai plus faire la comparaison pour insérer dans ma BDD. Non ?

Ben j'ai supposé que les colonnes du CSV correspondaient à celle de la table dans la BDD... Si ce n'est pas le cas il te faut un moyen de faire le mapping. Il n'y a aucun moyen de "deviner" que la colonne "toto" du CSV correspond à la colonne "tata" en BDD, il faut que ce soit indiqué quelque part

[vincent62149]

Oui ca je sais bien que c'est impossible mais va faire comprendre ca à mon responsable .

Il faudrait que le test se fasse, et si les colonnes ne correspondent pas, que la boucle d'insertion s'arrète, demande à l'utilisateur de choisir la colonne qu'il veut et que la boucle reparte avec les valeurs de la colonne sélectionnée.

C'est possible ca ?

[tomlev]

C'est possible ca ?

Oui bien sûr... mais il faut l'implémenter, ce sera jamais "automagique"

[Danyel]

ce sera jamais "automagique"

Moi je prefere auto...wash

[vincent62149]

D'accord ... :p

Disons que le programme s'éxecute :

Tout d'abord, il stocke les noms de colonne du fichier CSV. Puis, il compare ces noms de colonne avec les noms de colonne de la table SQL dans laquelle doivent être insérées les données.

Si la comparaison est OK, le programme enregistre les données de la datatable.
Si la comparaison échoue, le programme vérifie si le nom de la colonne existe dans les noms de la colonne CSV.

- Si ce nom existe, c'est que l'ordre des colonnes a été changé
-> Dans ce cas là, il faut que le programme insère les données correspondantes.

- Si ce nom n'existe pas, c'est que le nom de la colonne a été changé.
-> Dans ce cas là, c'est à l'utilisateur de choisir quelle colonne est la bonne

Pour ces deux points, je n'ai aucune idée du code à implémenter ...

Avez vous une idée ?

[tomlev]

Tout d'abord, il stocke les noms de colonne du fichier CSV. Puis, il compare ces noms de colonne avec les noms de colonne de la table SQL dans laquelle doivent être insérées les données.

Si la comparaison est OK, le programme enregistre les données de la datatable.
Si la comparaison échoue, le programme vérifie si le nom de la colonne existe dans les noms de la colonne CSV.

- Si ce nom existe, c'est que l'ordre des colonnes a été changé
-> Dans ce cas là, il faut que le programme insère les données correspondantes.

- Si ce nom n'existe pas, c'est que le nom de la colonne a été changé.
-> Dans ce cas là, c'est à l'utilisateur de choisir quelle colonne est la bonne

Pour ces deux points, je n'ai aucune idée du code à implémenter ...

Pour le premier point, la solution que je t'ai donnée doit faire l'affaire, vu que les données sont stockées dans les colonnes du DataTable avec le nom qui va bien, donc il suffit de les récupérer par nom de colonne lors de l'insertion

Pour le 2e point, il faut faire une interface pour demander à l'utilisateur de définir le mapping. Par exemple tu présentes une liste des colonnes du CSV, avec sur chaque ligne un ComboBox pour choisir la colonne de la BDD qui correspond. Un DataGridView me semble assez adapté pour faire ça... Ensuite il suffit de changer les noms de colonne du DataTable et de faire comme avant...