Discussion :

[saxrub]

Bonjour à tous
Je deviens fou !
Voici un code lisant un fichier "texte" pour lequel, je veux convertir des strings en float. Après moultes essais, le (float)$MyString renvoie toujours 0 (zéros) pour certains fichiers.
Par exemple, si l'on affiche le fichier via l'URL https://visiolittoral.fr/Traces/Trac...ebe4d28%7D.txt
on voit tout de suite la présence de losanges noir avec points d’interrogation.
Notez que ce fichier s'affiche correctement dans un notepad++ (par contre, aucun encodage n'est sélectionné dans l'onglet "Encodage").
Avec des fichiers UTF8, aucun problème.
Si j'ajoute des echo, vardump... les chaines (des coordonnées en l’occurrence) sont correctement affichées.
Comment :
- détecter/ouvrir ce type de fichier ?
- connaitre l'encodage ?
- arriver à convertir les chaines ?

Code PHP :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
  class Coord
                    {
                        public $long;
                        public $lat;
                    }
$inT=fopen("Traces/".$row["filename"],"r");		
	    while (!feof($inT)) 
            {
                $bufferT=fgets($inT);
                if ($bufferT===null or $bufferT===false or $bufferT=="" or strlen($bufferT)<=1) 
                {
                }
            else
            {
                    list($Long,$Lat)=Get_Positions($bufferT);
                    $coord = new Coord();
                    $coord->long = $Long;
                    $coord->lat = $Lat;
                    $Positions[]=$coord;
                }
        }
        fclose($inT);
function Get_Positions($LIGNE)
{
    $Long="";
    $Lat="";
$Direction="";
    list($Long,$Lat,$Direction)=explode(';', $LIGNE);
     return [(float)$Long,(float)$Lat];
  }

[ddaweb]

Bonjour,

Il me semble que $row["filename"] ne donne que le nom du fichier, sans son extension .txt

[Séb.]

Par exemple, si l'on affiche le fichier via l'URL https://visiolittoral.fr/Traces/Trac...ebe4d28%7D.txt
on voit tout de suite la présence de losanges noir avec points d’interrogation.

Je n'ai pas ceci, sans doute car mon éditeur (Notepad Windows) détecte correctement le codage. Ici UTF-16 LE.
On peut aussi déterminer le codage en visualisant la représentation hexadécimale du fichier, par exemple en l'ouvrant avec l'excellent https://hexed.it/ on voit que les caractères sont tous codés sur 2 octets.

Comment :
- détecter/ouvrir ce type de fichier ?
- connaitre l'encodage ?

Détecter/connaître : mb_detect_encoding(), mais ce n'est pas une solution miracle
Ouvrir : fopen(), mais PHP gère mal le multi-octet, il faut donc préparer les données "manuellement"

- arriver à convertir les chaines ?

Voir les fonctions mb_* ou iconv_*

Exemple sans utiliser l'horreur feof() et avec fgetcsv() :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
<?php
 
$file = 'https://visiolittoral.fr/Traces/Trace_{e05b27fe-67db-492a-8dd1-95274ebe4d28}.txt';
$contents = file_get_contents($file);
$contents = mb_convert_encoding($contents, 'UTF-8', 'UTF-16LE'); // Conversion du fichier de UTF-16LE vers UTF-8, sans ça nous aurions des \x00 qui trainent partout
 
$stream = fopen('php://memory', 'r+'); // Pour la lecture CSV
fwrite($stream, $contents);
rewind($stream);
 
$csv_options = ['separator' => ';', 'enclosure' => '"', 'escape' => ''];
 
while ($row = fgetcsv($stream, ...$csv_options)) {
    if (count($row) !== 3) { // Parce que ton fichier a une ligne finale vide...
        continue;
    }
    $row[0] = (float)$row[0]; // Conversion longitude en float
    $row[1] = (float)$row[1]; // Conversion latitude en float
    print_r($row);
}

Donne :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
Array
(
    [0] => -0.694671
    [1] => 49.345062
    [2] => N/A
)
Array
(
    [0] => -0.694673
    [1] => 49.345072
    [2] => N/A
)
Array
(
    [0] => -0.694673
    [1] => 49.34509
    [2] => N/A
)
Array
(
    [0] => -0.694672
    [1] => 49.3451
    [2] => N/A
)
Array
(
    [0] => -0.694671
    [1] => 49.345112
    [2] => N/A
)
...

[saxrub]

Salut Séb
J'ai utiliser $bufferTUTF8 =mb_convert_encoding($bufferT, 'UTF-8', 'UTF-16BE'); et ça fonctionne bien.
Par contre, j'utilise bien la dernière version de notepad++ sous Windows mais comment vois-tu que le codage est UTF 16 ?

[Séb.]

j'utilise bien la dernière version de notepad++ sous Windows mais comment vois-tu que le codage est UTF 16 ?

Pour Notepad++ je ne sais pas, et je ne pourrai pas t'aider, l'auteur m'interdit de l'utiliser.
Sur le Notepad Windows de base, quand on ouvre le fichier, on voit le codage détecté en bas à droite.

[ddaweb]

Pour Notepad++ je ne sais pas, et je ne pourrai pas t'aider, l'auteur m'interdit de l'utiliser.
Sur le Notepad Windows de base, quand on ouvre le fichier, on voit le codage détecté en bas à droite.

Séb a été puni

Notepad++ c'est également en bas à droite :



Pour votre fichier :

[saxrub]

C'était trop simple !
Merci à tous