|PHP] Rapidité de lecture

[Kroezensjtern]

Salut à tous.

Je travaille actuellement sur un script de statistiques : celui-ci charge tous les messages d'un forum (ça peut atteindre quelques millions) et traite ensuite.

Au niveau du traitement, il n'y a pas de problème, ça prend peu de temps.

Par contre, pour charger les messages, c'est vraiment la galère. Le script peut y passer plusieurs heures!

J'avais donc essayé MySQL, mais celui-ci se révèle particulièrement lent, face à ma dernière tentative, qui consiste à stocker un message par ligne dans un fichier. Le gain de temps est de ... quelques pourcents. Par terrible sur une 20aine d'heures. :-(

Je cherche donc une autre méthode. Pensez-vous que lire le fichier ligne par ligne et non le charger complètement avec file_get_content se révèlera plus rapide? Si oui, comment faire?

Auriez-vous d'autres solutions pour stocker ces messages et surtout les charger vite dans PHP?

Merci beaucoup.

[tsubasaleguedin]

Si il s'agit d'acces sequentiel aux données tu risque pas d'avoir des masses de diff entre un sgbd et un autre ... dont la performance dependra surtout de la fragmentation des données et du temps que le disque met pour lire.

[Amour]

ce serait pas mieux de mettre le fichier sur un ramdisk ?

[Kroezensjtern]

ce serait pas mieux de mettre le fichier sur un ramdisk ?

Ce n'est pas envisageable, puisque le programme est diffusé au grand public, les membres volontaires se chargent des calculs des statistiques des forums qu'ils souhaitent (avec 12000 forums je peux pas tout faire).