Discussion :

[vinzzzz]

Hello,

Voilà, j'ai un gros fichier a traiter, et je souhtaierai déléguer le traitement de ce fichier a N threads, chaque thread traitant une sous partie du fichier.

Pour ce faire, je vois deux solutions: soit découper le fichier en N fichiers qui contiendront chacun une portion du fichier de base, et traiter chacun de ces fichier, soit ouvrir le fichier en lecture par chacun des thread et ne lire que la partie correspondante au thread courant.

Je préfèrerai faire la deuxième solution, ma question est simplement de savoir si c'est possible de le faire ainsi? (cad. d'ouvrir le fichier en lecture dans plusieurs thread et de n'en lire que des sous parties dans chacun d'entre eux)

Merci d'avance!

[michel.di]

chaque thread ne pourra pas lire qu'une partie du code, le parcours d'un fichier doit commencer par le début. Tu ne peux pas dire je démarre a la ligne 15 par exemple. Donc tu ne peux avoir qu'un thread qui lit tout le fichier!

[dingoth]

Mais si, grâce au RandomAccessFile. Par contre, n'écris pas dedans à partir de plusieurs threads

[michel.di]

Je ne connaissais pas ça!
mais d'après la doc il va se placer aléatoirement dans le fichier. Il ne pourra donc pas savoir s'il a bien lu tout le fichier! si?!

[vinzzzz]

De toute facon mes threads partent du début du fichier. Il y a un certain nombre d'objets à traiter, de taille différente en terme de contenu dans le fichier, et délimité par des balises.

Donc pour le thread 2 par exemple, j'avance jusqu'à la balise N*2 (N étant le nb d'objets a traiter par chaque thread) et à partir de la je lis le fichier jusqu'a N*2 +N.

Bref donc c'est tout a fait possble de lire un même fichier simultanément par plusieurs threads sans avoir de problème, c'est une bonne nouvelle

Merci de vos réponses

[michel.di]

ah oui d'accord. Je pensais que les threads ne partaient pas du même endroit dans le fichier!

[dingoth]

Attention, RAF ne fonctionne que pour des offsets : pas en fonction du contenu !

Dans ton cas, un seul thread, un seul lecteur

[vinzzzz]

Au final je n'utilse pas RAF car je démarre à partir du début de mon fichier pour chacun des thread (justement car la description de chaque objet n'est pâs de taille fixe)