Sådan bruges Cloudflare til at spore og analysere logfiler fra AI-bots

Analyse af serverlogfiler er blevet den nye, fede marketingfærdighed, nu hvor AI er så svær at spore generelt. Lad mig bevise for dig, at det faktisk er MEGET nemt at gøre 👍️

Mange ved ikke, at Cloudflare gør det nemt at gøre dette. Du kan i princippet spore AI-bots og deres aktivitet på din hjemmeside.

Her er en trin-for-trin guide til, hvordan du bruger Cloudflares AI Crawl Control og hvordan jeg ville bruge det som marketingmedarbejder:

10 trin til at analysere AI-serverlogfiler med Cloudflare:

1. Log ind på Cloudflare og vælg den hjemmeside, du vil have data for:
2. Klik på “AI Crawl Control” i menuen til venstre:
3. Du skulle nu se data, der ligner dette:
4. Klik på “Oversigt” for at se dine samlede statistikker. “Anmodninger” er alle mulige måder, bots kan tjekke din hjemmeside på, herunder ikke nødvendigvis at se indholdet, men blot at tjekke, om den er i live, for eksempel. Henvisninger er rigtige browserbesøg på dit websted, men ikke nødvendigvis af mennesker. I min egen lille test ser jeg, at 10 % af henvisningerne er unikke menneskelige klik. Der er ingen eksakt videnskab her, men du kan verificere det via andre Cloudflare-værktøjer (HTTP Traffic) og andre webstedsanalyseplatforme. Jeg viser dig en metode nedenfor.
5. For at se ChatGPT-bots, der tjekker dit websted baseret på brugere, der chatter (enten for at give det som en del af et svar eller bruge det som en kilde), skal du klikke på disse:
6. Rul nu ned til bunden, indtil du ser denne del. Dette er den hemmelige sauce efter min mening. Disse oplysninger kan bruges i mit arbejde som marketingmedarbejder. Jeg kan i princippet se, hvilke landingssider ChatGPT-assistenter besøger mest, og dette er en præstationsindikator for, hvilke landingssider der vises mest som kilder og endda i svarene på brugerprompts:
7. Ovenstående er dog ikke nødvendigvis en scoret liste. Jeg kan se i vores analyseværktøj og i Cloudflares eget HTTP Traffic-værktøj, at f.eks. /youtube-duplicate-content/ giver meget få reelle brugerklik, så her bruges jeg primært som kilde (eller måske endda uden at blive krediteret. Det ville ikke overraske mig):
8. Og her er, hvordan du kan finde lignende data via HTTP Traffic-værktøjet ved hjælp af filtre. Opsæt disse 2 filtre, som jeg gjorde her, for at rydde op i dataene og se reelle sidebesøg:
9. Rul nu ned, indtil du ser denne tabel (du kan udvide den til 15 elementer). Dataene her ligner ret meget det, jeg har i mit webstedsanalyseværktøj, og giver dig en god indikation af, hvilke sider der får reel trafik fra ChatGPT:

Hvordan skal jeg bruge disse data til at øge min ChatGPT-synlighed?

Jeg ville holde øje med det mest crawlede indhold og bruge det til at beslutte, om noget af dit indhold skulle have højere prioritet. I mit tilfælde ser jeg ret meget aktivitet omkring https://morningscore.io/best-seo-tools/  (både bot-trafik og reel trafik), så jeg vil nu prioritere en ventende opdatering endnu højere. Og når jeg opretter nyt indhold, kan jeg komme tilbage til disse data månedligt for at tjekke, om nyt indhold er populært hos ChatGPT og fordoble indsatsen der. Du forstår pointen nu.

Og for at få det bedste billede ville jeg tage ovenstående data og kombinere dem med ChatGPT-sporing. Der er mange gode værktøjer til dette. Vi har bygget et, som vores kunder siger er fantastisk med solide data, så du kunne tjekke GEO-værktøjet gratis. Her kan du se, hvordan jeg bruger det til at spore prompts, og hvordan jeg kan verificere, at /best-seo-tools-siden faktisk giver os værdifulde omtaler:

Og når jeg åbner resultatpop op-vinduet for at se, hvad ChatGPT faktisk svarede, ser jeg:

Denne sidste del gør alt virkeligt, og jeg kan hurtigt forstå, hvordan jeg praktisk talt klarer mig i ChatGPT og andre AI-chatværktøjer 🙂

Cloudflare 👎️

Jeg er bare nødt til hurtigt at sige, at jeg er chokeret over, at Cloudflare har en forretningsmodel, hvor du ikke fuldt ud kan downloade dine egne hjemmesiders serverlogs, medmindre du betaler enorme summer (Enterprise-plan er nødvendig for fuld adgang). Jeg synes, det er forkert. Og derfor er dette indlæg på ingen måde en anbefaling af Cloudflare. Hvis du har en anden udbyder, er du måske faktisk heldig, selvom du ikke har et fancy dashboard, kan du ofte eksportere logs og bruge noget som Screaming Frog log-analysator for at få lignende (og i nogle tilfælde bedre) data.

Tak fordi du læste denne 100 % menneskeskrevne artikel 😊

Tak fordi du læste denne guide. Jeg håber, du fandt den nyttig og også er begejstret for AI-bot og logfilanalyse.

Folk siger ofte, at serverloganalyse, som den vi lige har lavet her (letvægtsstil selvfølgelig), kun er for tekniske SEO-professionelle. Men jeg tror, det vil blive meget mere mainstream i de næste par år 👍️