Bonsoir,

Voila je vais probablement passer pour un gros Zero, mais j'ai l'habitude et je prend ça comme un compliment

Je vais bientôt avoir besoin de développer une application en PHP qui va devoir insérer en bdd un très grand nombre d'url (plusieurs dizaines voir centaines de millions) or je n'ai aucune idée sur comment m'y prendre et ou chercher pour trouver des informations sur ce type d'architecture.

J'ai donc commencé par regarder l'architecture de la base de Piwik (un Google Analytics Open Source) mais apparemment il semble loguer toutes les actions des visiteurs dans une seule et unique table (piwik_log_link_visit_action).

Est-ce que quelqu'un aurait une piste ou une idée sur comment aborder ce type de problématique ?

Merci d'avance

Il faut juste bien penser ta base/tes tables ; pour info des centaines de millions d'entreés c'est rien par rapport aux bases de données d'entreprise telles que Google par exemple.

A priori les tables vont contenir peu de champs.

Il y a t-il un moyen de peupler une bdd rapidement sans faire une boucle for avec un $i<10000000 ?? Ce serait pour faire des tests.

Oui, tu peux le faire à la main...

Un brin d'ironie dans ta réponse MicroJoe ou je me trompe ?

Non c'était bien de l'ironie
Ben que voudrais tu faire qui soit plus rapide qu'une boucle ?

Justement c'est pour ça que je posai la question ... parce que je ne sais pas s'il existe une méthode plus rapide. A raison de 100 000 INSERT à la minute il me faudrait 16h pour peupler ma table avec 10 millions d'entrées. D'où ma question.

Bref j'ai fait des test avec 10 millions d'entrées et c'est de l'ordre de la milliseconde, donc à priori pas besoin d'opter pour une architecture spécifique.

Je marque le sujet comme résolu.