Discussion :

[calitom]

Bonjour,

A la base je dois lire un gros fichier (>4Go) en php, mais sous la redhat le fopen de mon fichier renvoi une erreur (File too large).
Cela fonctionne sous une Debian Lenny (fopen puis fgets(4096))

Du coup je voudrais savoir s'il y a une commande shell qui permet de lire de l'octet x à l'octet y sans ouvrir le fichier.
Du genre

oct_read -f path_to_mon_fichier -start 0 -end 4096

Qui lirait les 4096 premiers octets de mon fichier.
Comme ca je pourrais faire un shell_exec de cette commande qui me permettrai de ne pas utiliser fopen qui ne marche pas sous la redhat.

Y a t'il un moyen de faire ca ?

[zipe31]

Salut,

head -c 4096 ton_fichier ?

[al1_24]

Du coup je voudrais savoir s'il y a une commande shell qui permet de lire de l'octet x à l'octet y sans ouvrir le fichier.

Il faut toujours ouvrir un fichier pour le lire, quelle que soit la commande qui fait la lecture

Il y a peut-être une bibliothèque complémentaire ou une option de compilation pour pouvoir ouvrir de grands fichiers.

[calitom]

Oui al1_24 tu as raison mais je voulais juste faire comprendre que je ne voulais pas récupérer tout mon fichier ;-). Sinon il y a possibilité de recompiler php avec le flag 64bit mais je ne peux pas...
Merci de ta réponse zipe31, mais cette commande à l'aire de ne recupérer que le début du fichier...

Je viens de réussir en faisant comme ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
dd if=mon_fichier bs=1 skip=0 count=4096
dd if=mon_fichier bs=1 skip=4096 count=4096
dd if=mon_fichier bs=1 skip=8192 count=4096
...

Ca à l'air de bien marcher, mais je ne l'ai pas encore tester dans mon contexte.
Y a t'il une meilleure méthode ?

[jack-ft]

Y a t'il une meilleure méthode ?

il y a 'split' qui simplifie un peu la boucle, mais ça coûte cher en espace disque puisque le fichier est entièrement dupliqué.

[calitom]

Du coup voici mon code :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
 
while ($taille_lue<$taille_totale)
{
  shell_exec("dd if=".escapeshellarg($fsource)." bs=1 skip=".$taille_lue." count=4096 > /tmp/import_xml.txt");
  $ligneXML=file_get_contents('/tmp/import_xml.txt');
  $taille_lue += strlen($ligneXML);
}

Le problème est qu'il y a des caractères parasites : "^@" devant chaque lettre en éditant avec nano mon fichier '/tmp/import_xml.txt'...

Une idée sur comment récupérer la redirection de cette commande sans ces caractères ?

[zipe31]

Merci de ta réponse zipe31, mais cette commande à l'aire de ne recupérer que le début du fichier...

Ben c'est pourtant ce que tu demandais dans ton 1er message si je ne m'abuse, non ?

Du coup je voudrais savoir s'il y a une commande shell qui permet de lire de l'octet x à l'octet y sans ouvrir le fichier.
Du genre

Qui lirait les 4096 premiers octets de mon fichier.

Je sais bien qu'il y avait aussi de mentionner "de lire de l'octet x à l'octet y", mais j'ai quand même répondu à la demande.

[calitom]

C'était la ligne qui traduisait ma ligne de commande inventée, mais je reconnais que ce n'était pas forcément très clair ! ;-)