V konferenci SEO.nawebu.cz Štěpán Škrob upřesnil, proč Seznam.cz přešel v UA stringu na Mozilla/5.0 z původního SeznamBota.
Tato úprava řeší hlavně problém se změnou obsahu, kterou sice tvůrci mysleli dobře, ale Seznamu moc neprospívá.
Problém se vždy vyskytoval na nějakých béčkových webech, tak nám to nepřišlo až tak důležité řešit. S postupem doby se ale přidávaly weby, u kterých bych to nečekal.
Štěpán pokračuje příklady:
- našli jsme nějaký framework, který reagoval na substring "bot" v useragentu. Bylo to dávno, už si přesně nepamatuju co to bylo a co to přesně dělalo (myslim že to měnilo odkazy nebo redirektovalo na jinou stránku), jen vím, že to byl nějaký framework.
- pak jsou stále weby jako např. olympiada.astro.cz, které když neni UA == Mozilla, tak řekne sorry a žádný obsah nevydá
- no a teď poslední kapka byla, když facebook.com (!) začal dělat, že když UA obsahuje substring "bot" (to je mimochodem poměrně častá detekce), tak vždy vrací anglickou verzi místo jazyka, který jsi požadoval
Myslím, že během historie jsme zaznamenali i weby, které podle UA regulují cookies a JS, popř. rovnou pošlou na nějakou noJS stránku. Ale vždycky to byly béčkový weby, tak jsme si řikali, že tomu asi tolik nerozumějí a komu není rady tomu není pomoci. Ale teď to začal dělat i FB :-((
Záměrné cloakování contentu u nás spadá do kompetence spam teamu a tato změna UA ho nemůže řešit. Je to jen skutečně kvůli tomu, abychom stránky získávali co nejvíce podobně, jak je vidí uživatelé.