Discussion :

[pianobbox]

Bonjour,

Je travaille actuellement sur application web qui agrège et traite plusieurs sources de données (xml, json, csv ...) avant de les insérer dans une base de donnée MySQL.
L'application est développée en PHP et je souhaiterai migrer vers un autre langage plus approprié pour ce genre de traitement.

Certaines personnes m'ont conseillé PERL mais je souhaiterai avoir votre avis sur la question.

Merci pour votre aide,

P.

[gangsoleil]

Bonjour,

Si ton but est d'extraire des informations textuelles pour les inserer en base, je pense que perl ou python feront bien ce que tu veux. Un peu comme n'importe quel langage d'ailleurs.

[pianobbox]

Bonjour,

Merci pour ta réponse,
il y aussi un traitement des données entre l'extraction et l'insertion en base qui utilise notamment le DateTime de php.

N'étant pas familier des langages dits de bas niveau, je cherche à savoir si il faut que je m'oriente vers un de ces langages pour gagner en performance, en particuliers sur la gestion mémoire lors du traitement.
Je fais en sorte d'optimiser le code mais j'ai la conviction que PHP n'est lui même pas optimisé pour ce genre de traitement massif.

P.

[blbird]

Personnellement, pour ce type de tâches d’agrégation de données, j'utiliserais un outil dédié du style Talend. Un ETL donc, qui ne sait faire que ce genre de choses, mais qui le fait très bien.

[randriano]

Tout langage peut faire cela! Utilise l'environnement qui te met à l'aise!

J'ai récemment développé un outil pareil avec PHP et ça marche très bien!

[pianobbox]

Merci à tous deux pour vos réponses,

@blbird, je vais regarder ce que propose Talend, ne connaissant que de nom et pour leurs grosses levées de fonds

@randriano, effectivement PHP fait bien ça, du moins au début, la montée en charge devient exponentielle et j'ai peur que PHP ne suivent plus au bout d'un moment