Pourquoi faut-il plus de temps pour vérifier le lien final ?

Dans le cas de projets multiples, le crawler a besoin de beaucoup plus de temps pour les derniers liens que pour les liens précédents. Ceci est dû au fait qu’à la fin du processus de crawling, nous vérifions à nouveau tous les liens qui n’ont pas pu être trouvés auparavant.

Afin de proposer une collection de données aussi complète que possible, tous les serveurs qui n’ont pas pu être joints auparavant sont sollicités à nouveau postérieurement. Ceci explique le plus grand délai de charge pour les derniers pourcentages.

Vous pouvez déjà ouvrir le projet pendant l’évaluation et voir les résultats pour les liens à ce stade. De plus, nous vous envoyons un e-mail de confirmation une fois que tout est terminé.

16.11.2015