(Stránka 16)
Na konci února jsme nasadili vylepšení hledání, které se věnuje propadům nově přesměrovaných webů. Toto řešení jsme v průběhu března testovali a postupně vylaďovali; poslední testy ještě dobíhají.
Fulltextový robot má komponentu zvanou Freshbot, která stahuje čerstvý obsah jak z RSS, tak z jiných zdrojů nových odkazů. O změně Freshbota jsme psali již před časem na blogu. Mach II, výkonnější a rychlejší verze Freshbota, je teď nasazena v plném provozu.
V polovině března tohoto roku jsme nasadili a spustili rychlé stahování a indexaci nových videí. Zatím jsme se omezili na vybrané zdroje především z českého internetu. Mezi nimi jsou některé zpravodajské servery a televizní archivy.
Před nějakou dobou jsme zaznamenali tweet, v němž se Pavel Cody Ungr zajímal o „funkční postup, jak ověřit, zda je URL v indexu“. Tweet měl celkem slušný ohlas – 14 retweetů a 8 lajků.
Jednou z klíčových činností našeho robota, který spravuje naši databázi internetu, je procházení webu a nacházení nových URL, které stojí za to stáhnout. Seznam vyhledávání má mnoho cest, jak se dozvědět o nových URL. Nejčastěji se o nich dozvídáme tak, že narazíme na neznámou URL jako na odkaz na nové stránce. Včera jsme nasadili nový …
Naše vyhledávání má jedinečný přehled o českém internetu, neboť jeho velký vzorek máme uložený v indexu. Chtěli bychom se s vámi postupně podělit o různá zajímavá čísla.
