Discussion :

[kanzarih]

Bonjour,
Après plusieurs heures de recherche j'hésite encore sur la façon de déborder ce sujets, bref, je doit parser des fichiers XML de grandes tailles (minimum 25 mb) en PHP en premier lieux je me suit penché sur DOM et la bibliothèque libre DOMit, aprés je me suis dit pourquoi ne pas utiliser soit SimpleXML ou simplement la fonction XML_tree de PHP5 j'ai même penser a coder mon propre parseur. mais dans tous ce bazar je doit me tourner vers quelqu'un plus expérimenté dans le sujet.

Alors quel approche me conseillez vous SVP.

Merci

[gg00xiv2]

Que souhaites-tu faire sur ce fichier ?

S'il s'agit d'une extraction simple (un élément), je te conseille une lecture par la biais d'une expression régulière (preg_match).

S'il s'agit d'une lecture continue (n noeuds), utilise un strpos avec un décalage du paramêtre offset à chaque lecture.

DOM ou SimpleXML chargent le fichier en mémoire, ce qui signifie que chaque exécution de ton script consomme minimum 25mo de RAM. Cela peut potentiellement devenir dangereux multiplié par ton nombre d'utilisateurs.

PS : Le format XML n'est pas destiné aux gros volumes de données, si tu as la main sur le choix du format de stockage, je te conseille plutôt une base de données, même simple, comme MySQL ou PostgreSQL.

[RunCodePhp]

Salut

Il y a aussi XMLReader : http://fr2.php.net/manual/fr/class.xmlreader.php

Même si je l'ai essayé, je ne l'ai pas fais sur de gros fichiers, donc impossible d'en dire sur ce point.
Mais il me semble avoir retenu que cette classe serait pas mal dans un cas comme celui ci, car elle ne chargerait pas l'intégralité du document en mémoire (ce qui serait le cas de DOMDocument et SimpleXML).

J'ai tout de même noté que la lecture/parcourt n'est tout de même aussi pratique que DOMDocument ou SimpleXml.

C'est pas grand chose, mais si ça peut aider.

[Thes32]

Il y a aussi XMLReader : http://fr2.php.net/manual/fr/class.xmlreader.php

+2

XML reader est ton ami, j'ai eu à l'utiliser pour des très gros fichier XML, non seulement qu'il est hyper rapide, il bouffe également peut d'espace en mémoire.

Le seul soucis est qu'il n'est pas simple à coder.

[kanzarih]

Bonjour,

Merci pour vos réponses, en fait j'ai la main sur le choix mais je ne peut changer le XML car c'est le but même du projet, qui consiste a trouvez une solution pour codé une librairie qui peut être utilisé comme base de données pour des petit et moyen application web.

j'ai tous de même essayer de concevoir une solution pour ne pas avoir des fichier XML de grande taille, et ce en fixant la taille des fichiers XML jouent le rôle de support de stockage, et si un fichier dépasse cette taille, le système créera un nouveau et continue l'enregistrement dedans, bien évidement les fichiers serons indexés et l'index en cours sera stocké quelque part pour une future utilisation de plus le taille du fichier en cours d'utilisation sera calculer avant chaque opération pour décider si on continue l'enregistrement ou on passe a un nouveau index et donc un nouveau fichier. avec cette solution j'aurai plusieurs fichiers XML de taille fixe dont je peut manipuler par SimpleXML.

Que dite vous de cette conception? j'aimerai bien avoir votre avis avant de débuter le codage?

Merci

[kaymak]

+3 pour xmlreader.

Pour l'autre question, pourquoi ne pas utiliser une bdd sqlite ? ...

[kanzarih]

+3 pour xmlreader.

Pour l'autre question, pourquoi ne pas utiliser une bdd sqlite ? ...

Bonsoir kaymak,

J'ai rien contre sqlite, au contraire, je l'utilise dans les plus part de mes projets il est TOP .

Pour le projet; que j'ai déjà commencé; il s'agit d'un défit, codé une librairie pouvant être utilisé comme une BD, et qui peut être la base pour d'autre personnes pour abordé le sujet XML. Et qui sait un jours cette librairie peut être une des plus puissants si je trouve des personnes intéressé par le sujet pour m'aider d'ailleurs j'ai installé une plateforme pour pouvoir travaillé avec d'autre personnes enligne (http://www.farkess.com/BIBOS/)

Si vous ete intéressé je vous donnerais un compte pour commencé

Merci