Provoz botů a filtrování spamu: čištění dat od nelidských návštěv

Zjistěte, jak v analytice rozpoznat a vyfiltrovat boty a spam, abyste měli přesná data o návštěvnících.

Koncept

Vaše návštěvnost se najednou zdvojnásobí. Vypadá to skvěle. Pak zjistíte, že skok přišel z jediné země, do které neprodáváte, a pořád dokola míří na stejnou stránku. Boti.

Provoz botů je ve výchozím stavu neviditelný. Do vašich analytických reportů se dostává a vypadá jako skuteční návštěvníci. Nafukuje vaše metriky, kazí konverzní poměry a znemožňuje vidět, co skutečně funguje.

Co se počítá jako provoz botů

Ne každá nelidská návštěvnost je špatná. Vyhledávače, které procházejí váš web, jsou boti. Stejně tak crawlery odkazů na sociálních sítích. To jsou legitimní boti, které ve svých datech chcete mít.

Spamboti jsou jiní. Jde o automatické návštěvy navržené tak, aby nafukovaly metriky návštěvnosti, manipulovaly analytiku nebo procházely váš web kvůli scrapingu. Zkreslují vaše data a plýtvají vašimi zdroji.

Legitimní boti

Vyhledávače (Google a další). Crawlery sociálních sítí (Facebook a další). Boti pro monitoring a kontrolu dostupnosti. Tito boti mají svůj účel a obvykle by měli být ve vaší analytice zahrnuti, i když někteří je vylučují, aby se soustředili na chování lidí.

Spamboti

Boti referral spamu, kteří generují falešnou referral návštěvnost. Boti click fraudu, kteří simulují konverze. Scraperboti, kteří sbírají váš obsah. Boti hrubé síly, kteří hledají zranitelnosti. Ti nemají žádný legitimní účel a zkreslují vaše data.

Podezřelí legitimní boti

Někteří boti se pohybují v šedé zóně. IP adresy datacenter, které váš web pingují. Affiliate trackery, které vypadají jako uživatelé. Boti pro ověřování reklam, kteří na reklamy klikají, aby zjistili, zda fungují. Technicky jsou legitimní, ale podle vašich cílů mohou vaše metriky zkreslovat.

Jak boti zkreslují vaši analytiku

Nafouknutá čísla návštěvnosti

Boti zvyšují počet zobrazení stránek. Myslíte si, že váš web denně navštíví 1 000 lidí, ale 300 z nich jsou boti. Vaše skutečná lidská návštěvnost je jen 700. Rozhodujete se podle nafouknutých čísel.

Zkreslené konverzní poměry

Někteří boti spouštějí konverzní události. Klikají na tlačítka. Odesílají formuláře. Počet vašich konverzí vypadá lépe, než ve skutečnosti je. Konverzní poměr se zdá vyšší, než opravdu je.

Zkreslené zdroje návštěvnosti

Boti referral spamu vytvářejí dojem, že návštěvnost přišla z webů, které vás nikdy neodkázaly. Váš přehled referral návštěvnosti se znečistí falešnými zdroji. Můžete tak navázat partnerství se zdroji, které neexistují.

Rozbitá atribuce

Boti vytvářejí relace, které kazí váš model atribuce. Kliknou na reklamy, odejdou a vrátí se. Váš model atribuce jim přisoudí konverze, které nezpůsobili. Skutečné zdroje pak nesou vinu za problémy způsobené boty.

Jak provoz botů rozpoznat

Hledejte vzorce, které neodpovídají lidskému chování

Boti mají předvídatelné vzorce. Přesně stejný počet zobrazení stránek na relaci. Žádná variabilita v posouvání stránky nebo době na webu. Návštěvnost ze zemí, které neodpovídají vašemu podnikání. Několik konverzí během pár sekund. Tyto vzorce značí nelidskou návštěvnost.

Využijte filtrování botů ve svém analytickém nástroji

Většina analytických nástrojů má vestavěnou detekci botů. Google Analytics má políčko pro vyloučení známých botů. Filtruje podle seznamu známých botů organizace Interactive Advertising Bureau. Zapněte ho jako první, zachytí zjevné boty bez falešných poplachů.

Vytvořte vlastní filtry pro vzorce spamu

Někteří spamboti projdou standardními filtry. Hledejte ve svých datech vzorce: vysoká návštěvnost z jediné IP adresy, návštěvnost ze známých rozsahů IP adres datacenter, relace s nulovou dobou do opuštění, konverze od botů jasně označených v logu serveru.

Vytvořte filtry, které tyto vzorce vyloučí. Buďte opatrní, příliš přísný filtr může vyloučit skutečnou návštěvnost. Filtry otestujte, než je použijete ve svých hlavních reportech.

Porovnejte s logy serveru

Logy serveru ukazují informace o user-agentovi, které analytické nástroje někdy přehlédnou. V logu serveru zkontrolujte user-agenty, které jsou jasně boti. Porovnejte návštěvnost z těchto user-agentů v logu serveru s tím, co se objeví v analytice.

Pokud log serveru ukazuje výrazně víc návštěvnosti než analytika, může být rozdíl způsoben boty. Prošetřete zdroj.

Jak provoz botů filtrovat

Zapněte vestavěné filtrování botů

Zapněte nativní filtrování botů ve svém nástroji. V Google Analytics přejděte do Správce > Nastavení zobrazení > Filtrování robotů. Zaškrtněte políčko. Tím se z reportů odfiltrují známí boti, aniž by se rozbila vaše data.

Vytvořte vyloučení podle IP adres

Pokud provoz botů přichází z konkrétních rozsahů IP adres, vytvořte filtr, který je vyloučí. Nejdřív znejte své vlastní IP adresy, ať omylem nevyloučíte svůj tým nebo kancelář. Poté přidejte známé rozsahy IP adres spamu nebo datacenter, které nepředstavují skutečné návštěvníky.

Filtrujte podle user-agenta

Některé analytické nástroje umožňují filtrovat podle řetězce user-agent. Boti se v user-agentovi často sami prozradí. Pokud to váš nástroj podporuje, vyfiltrujte user-agenty známých botů. Na zjevné boty to funguje lépe než na sofistikované.

Vytvořte segmenty pro analýzu botů

Než boty úplně vyloučíte, vytvořte segment, který je izoluje. Díky tomu změříte dopad. Kolik návštěvnosti tvoří boti? Jaká je vaše skutečná míra opuštění bez nich? Když pochopíte rozsah problému, rozhodnete se o filtrování lépe.

Kompromis: vyloučit boty, nebo je ponechat

Důvody k vyloučení botů

Boti zkreslují vaše chápání skutečného chování uživatelů. Skutečné konverzní poměry. Skutečná míra opuštění. Skutečné vzorce návštěvnosti. Pokud optimalizujete pro zážitek lidských uživatelů, je provoz botů šum, který byste měli vyloučit.

Důvody k ponechání botů ve svých datech

Boti představují skutečnou návštěvnost, která zatěžuje váš web. Spotřebovávají šířku pásma. Mohou ovlivnit zatížení serveru. Někteří vylučují lidské návštěvníky z dat o botech, jen aby viděli, jak nelidská návštěvnost vypadá. Ponechání botů vám říká něco důležitého o skladbě návštěvnosti vašeho webu.

Praktické řešení

Vytvořte oddělená zobrazení nebo segmenty. Jedno zobrazení se zapnutým filtrováním botů pro rozhodování. Jedno zobrazení se vší návštěvností pro pochopení celkového obrazu. Takto uvidíte pravdu o lidech i skutečnost o celé návštěvnosti.

Často kladené otázky

Jsou všichni boti pro moji analytiku špatní?

Ne. Boti vyhledávačů jsou legitimní a užiteční. Crawlery sociálních sítí mají svůj účel. Data zkreslují jen spamboti a boti click fraudu. Většina analytických nástrojů rozlišuje mezi legitimními a podezřelými boty. S Tvůrcem webů od WEMASY to můžete nastavit přímo na svém webu.

Kolik návštěvnosti obvykle tvoří boti?

Velmi se to liší. Obsahové weby mohou mít 10 až 20 % návštěvnosti od botů. E-shopy mohou mít 30 až 40 %, pokud se na ně zaměřuje click fraud. Své číslo zjistíte jedině tím, že se podíváte do svých dat.

Mohou boti spouštět konverze v mé analytice?

Ano. Někteří boti jsou dost sofistikovaní na to, aby vyplnili formuláře a dokončili proces pokladny. Je to méně časté než prosté nafukování návštěvnosti, ale stává se to. Zkontrolujte konverze, které neodpovídají platební bráně.

Je filtrování botů trvalé, nebo ho mohu vypnout?

Po zapnutí je trvalé, ale vypnout ho můžete kdykoli. Počítejte jen s tím, že historická data s uplatněným filtrováním se nezmění, pokud ho později vypnete. Vytvořte si samostatné zobrazení před filtrováním a po něm a porovnejte je.

Jak poznám, že filtr blokuje skutečnou návštěvnost?

Otestujte ho. Vytvořte filtr na sekundárním zobrazení nebo segmentu. Porovnejte metriky s nefiltrovaným zobrazením. Hledejte poklesy, které nedávají smysl. Pokud návštěvnost z umístění vaší kanceláře po filtrování podle IP adresy klesne, je váš filtr příliš široký.

Mám boty vyhledávačů z analytiky vyloučit?

Obvykle ne. Procházení vašeho webu vyhledávači je bezplatná návštěvnost a dobré znamení, že se váš web indexuje. Jejich vyloučením získáte jasnější obraz lidských návštěvníků, ale ztratíte přehled o aktivitě crawlerů.

Využijte to hned
na vlastním webu.

Začněte zdarma s WEMASY a postavte si web za pár minut.