Retour sur le développement d'un site à gros volume de données

La gestion de millions d'objets au sein d'un projet Django n'est pas forcément beaucoup plus compliquée qu'à une échelle plus réduite. Ce qui l'est plus, c'est quand ces objets sont tirés de sites distants, mis à jour plus ou moins régulièrement, et qu'il en apparaît ou disparaît en permanence.

Cette mini-conférence présentera les choix effectués pour mener à bien un tel projet : récupération des données, stockage, recherche, cache…