Discussion :

[sculpteur]

Bonjour
j'ai une serieuse problématique
je recois chaque jour un fichier xml compressé de taille 600Mo avec lequel je dois alimenter une base de données, en le decompressant il c'est extracté en 5Go et la lecture et même le décompression sont devenues impossible, le serveur se plante.
je me suis dis que perl pourra régler ce probleme,
j'ai entendu parler de queques modules de décompression des fichiers

Archive::machin
PerlIO::gzip
mais je suis débutant en Perl et je ne sais comment les exploiter
tout dabord je vous montre les module dont dispose mon serveur,
http://savelots.com/modules.txt
et j'aimerais savoir
-est ce que c'est faisable en perl
-quels sont les modules qui vont m'aider
-est ce que je peux les installer sur mon serveur apache s'ils sont pas dans ma liste
-et comment mettre en place la solution.
j'ai trouvé ça http://www.developpez.net/forums/sho...d.php?t=168225
m'ai j'ai pas su m'en servir.

Vous auriez pas peut être la solution?

Merci de votre aide

[Jedai]

Attention, ton XML est sans doute bien trop gros pour ton serveur... Il va falloir mettre à jour ta base de donnée au fûr et à mesure que tu lis le .gz.
Tu as tous les modules nécessaires à la décompression de ton .gz, par exemple :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
#!/usr/bin/perl
use strict; use warnings;
use IO::Zlib;
 
my $gz_filename = 'xml.gz';
 
my $xml = IO::Zlib->new( $gz_filename, 'rb' );
die "Couldn't open $gz_filename : $!\n" unless defined $xml;
 
while ( my $line = <$xml> ) {
  # do something with $line (feed it to a SAX parser ??)
}
 
undef $xml; # to close the file

--
Jedaï

[fyury]

Tu veux donc juste decompresser ton archive ?

Je peut dèjà te conseiller deux modules:

-Archive::Zip
-PerlIO::gzip

fin si tu peux répondre à ma question ^^.