La partie de localisation d'IP connait depuis quelques mois des ralentissements. Le nombre de requêtes augmente regulièrement suite au trafic des internautes, les crawl des robots et l'algo de localisation d 'IP.
Courant juin, je mets un système de cache 100% Html sur les pages, plus de détail se trouve ici .
Le cache est généré lorsque l'internaute demande un page. Sur les 350 000 IP, le nombre de page enregistré avançait doucement... trop doucement
Il me vint une idée pour simuler du trafic sur l'application de localisation d'IP:
- décomposer 100 000 Url dans des sitemaps,
- soumettre les sitemaps à Google,
- attendre !
Aujourd'hui, Google s'est réveillé et crawl les pages à fréquence de 1 page toute les 2 minute, d'ici ce soir il aurait passé 20 000 pages.
Les fichiers cache se remplissent à vive allure,
Merci Google