SeznamBot ještě rychleji prochází odkazy

Po vylepšení FreshBota, vývojový tým Seznamáckého fultextu vylepšil i běžného robota.

Ten na rozdíl od Freshbota prochází násobně větší objemy stránek.

Robot nyní reaguje dříve na obsah stránky a nová stránka se dostane do indexu dvakrát rychleji.

Doposud stránka procházela složitějším zpracováním. Kvůli závislostem trvalo i několik dní od stažení URL než z ní Robot mohl využít informace potřebné pro svou další práci. Navíc vnitřní procesy robota zasahovaly také do indexace webových stránek.

Zdroj:

• Robot rychleji následuje odkazy