Så här använder du Cloudflare för att spåra och analysera loggar från AI-botar

Analys av serverloggfiler har blivit den nya coola marknadsföringsfärdigheten nu när AI är så svår att spåra i allmänhet. Låt mig bevisa för dig att det faktiskt är VÄLDIGT enkelt att göra 👍️

Många vet inte att Cloudflare låter dig enkelt göra detta. Du kan i princip spåra AI-botar och deras aktivitet på din webbplats.

Här är en steg-för-steg-guide om hur du använder Cloudflares AI Crawl Control och hur jag skulle använda det som marknadsförare:

10 steg för att analysera AI-serverloggar med Cloudflare:

1. Logga in på Cloudflare och välj den webbplats du vill ha data för:
2. Klicka på ”AI Crawl Control” i vänstermenyn:
3. Du bör nu se data som liknar detta:
4. Klicka på ”Översikt” för att se din totala statistik. ”Förfrågningar” är alla möjliga sätt som botar kan kontrollera din webbplats, inklusive att inte faktiskt se innehållet utan bara kontrollera om det är aktivt till exempel. Hänvisningar är riktiga webbläsarbesök på din webbplats, men inte nödvändigtvis av människor. I mitt eget lilla test ser jag att 10% av hänvisningarna är unika mänskliga klick. Det finns ingen exakt vetenskap här, men du kan verifiera det via andra Cloudflare-verktyg (HTTP Traffic) och andra webbplatsanalysplattformar. Jag visar dig en metod nedan.
5. För att se ChatGPT-botar som kontrollerar din webbplats baserat på användare som chattar (antingen för att tillhandahålla det som en del av ett svar eller använda det som en källa) klicka på dessa:
6. Scrolla nu ner till botten tills du ser den här delen. Detta är den hemliga såsen enligt mig. Denna information kan användas i mitt arbete som marknadsförare. Jag kan i princip se vilka landningssidor ChatGPT-assistenter besöker mest, och detta är en prestandaindikator för vilka landningssidor som visas mest som källor och även i svaren på användarfrågor:
7. Ovanstående är dock inte nödvändigtvis en poängsatt lista. Jag kan se i vårt analysverktyg och i Cloudflares eget HTTP Traffic-verktyg att till exempel /youtube-duplicate-content/ ger väldigt få riktiga användarklick, så här används jag främst som en källa (eller kanske till och med utan att krediteras. Jag skulle inte bli förvånad):
8. Och här är hur du kan hitta liknande data via HTTP Traffic-verktyget med hjälp av filter. Ställ in dessa 2 filter som jag gjorde här för att rensa upp datan och se riktiga sidbesök:
9. Scrolla nu ner tills du ser den här tabellen (du kan expandera den till 15 objekt). Datan här är ganska lik den jag har i mitt webbplatsanalysverktyg, och ger dig en bra indikation på vilka sidor som får riktig trafik från ChatGPT:

Hur ska jag använda denna data för att öka min ChatGPT-synlighet?

Jag skulle hålla ett öga på det mest genomsökta innehållet och använda det för att avgöra om något av ditt innehåll ska få högre prioritet. I mitt fall ser jag ganska mycket aktivitet kring https://morningscore.io/best-seo-tools/  (både bottrafik och riktig trafik) så jag kommer nu att prioritera en pågående uppdatering ännu högre. Och när jag skapar nytt innehåll kan jag komma tillbaka till denna data varje månad för att kontrollera om något nytt innehåll är populärt hos ChatGPT och satsa mer på det. Du förstår poängen nu.

Och för att få den bästa bilden skulle jag ta ovanstående data och kombinera den med ChatGPT-spårning. Det finns många bra verktyg för detta. Vi har byggt ett som våra kunder säger är bra med solid data, så du kan kolla in GEO-verktyget gratis. Här kan du se hur jag använder det för att spåra prompts, och hur jag kan verifiera att /best-seo-tools-sidan verkligen ger oss värdefulla omnämnanden:

Och när jag öppnar resultatpopupfönstret för att se vad ChatGPT faktiskt svarade ser jag:

Denna sista del gör allt verkligt och jag kan snabbt förstå hur jag praktiskt taget presterar i ChatGPT och andra AI-chattverktyg 🙂

Cloudflare 👎️

Jag måste bara snabbt säga att jag är chockad över att Cloudflare har en affärsmodell där du inte helt kan ladda ner dina egna webbplatsers serverloggar om du inte betalar enorma summor pengar (Enterprise-plan krävs för full åtkomst). Jag tycker att detta är helt fel. Och därför är detta inlägg på intet sätt ett stöd för Cloudflare. Om du har en annan leverantör kanske du faktiskt har tur, även om du inte har en snygg instrumentpanel, kan du ofta exportera loggar och använda något som Screaming Frog logganalysator för att få liknande (och i vissa fall bättre) data.

Tack för att du läste denna 100% mänskligt skrivna artikel 😊

Tack för att du läste den här guiden. Jag hoppas att du tyckte den var användbar och att du också är entusiastisk över AI-bot- och loggfilsanalys.

Folk säger ofta att serverlogganalys som den vi just gjorde här (lättviktsstil förstås) bara är för tekniska SEO-proffs. Men jag tror att det kommer att bli mycket mer mainstream under de närmaste åren 👍️