Att synas i ChatGPT search är inte samma sak som att ranka på Google. Du behöver inte vara indexerad i Google. Du behöver inte heller länkar från andra webbplatser (även om de hjälper). Det du behöver är att vissa specifika crawlers kommer åt ditt innehåll och att strukturen går att läsa.
De flesta artiklar om ChatGPT-indexering missar det största hindret: ChatGPT:s crawlers kör inte JavaScript. Om ditt innehåll laddas dynamiskt med JavaScript (vilket gäller ungefär 90 % av moderna webbplatser) ser ChatGPT bara tomma containrar.
Den här artikeln går igenom vad som faktiskt spelar roll för synlighet i ChatGPT, hur du kontrollerar om du är indexerad och hur du åtgärdar de vanligaste hindren.
De tre OpenAI-crawlerna och varför de spelar olika roll
OpenAI driver tre olika crawlers, och de har olika syften. Skillnaden avgör vad du behöver göra.
GPTBot
Den här crawlern används för att träna ChatGPT:s språkmodell. Den söker igenom webben för att samla träningsdata. Om du blockerar GPTBot i robots.txt säger du "använd inte mitt innehåll för att träna AI-modeller". Det påverkar inte synligheten i ChatGPT search. GPTBot är till för modellträning, inte för att hitta innehåll i sökning i realtid.
OAI-SearchBot
Det här är crawlern som hittar ditt innehåll till sökresultaten i ChatGPT search. OAI-SearchBot gör sökningar i realtid och hämtar innehåll som stöd för svaren. Om du blockerar OAI-SearchBot kan ChatGPT search inte hitta dig.
ChatGPT-User
Det här är crawlern som körs när en ChatGPT-användare använder sökfunktionen i ChatGPT. Den hanterar förfrågningar i realtid och kan interagera med externa program och webbläsning.
Slutsatsen: Du vill tillåta OAI-SearchBot och ChatGPT-User i din robots.txt. Du kan blockera GPTBot om du inte vill att ditt innehåll används för modellträning, och det påverkar inte synligheten i ChatGPT search.
Det kritiska hindret: JavaScript-problemet
Det här är det viktigaste avsnittet. Läs noga.
ChatGPT:s crawlers läser rå HTML. De kör inte JavaScript. Googlebot hämtar en sida, tolkar koden, kör JavaScript och renderar den färdiga visuella sidan. ChatGPT:s crawlers gör inte det. De ser bara det som finns i det första HTML-svaret.
Om din webbplats laddar innehåll dynamiskt med JavaScript (React, Vue, Angular eller något annat JavaScript-ramverk som renderar på klientsidan) ser ChatGPT tomma div-containrar. Inget innehåll. Ingen text. Inget att indexera.
Därför kan en sida ranka högst på Google (Google kör JavaScript) men ändå aldrig dyka upp i ChatGPT search (ChatGPT gör det inte).
Så kontrollerar du: Visa sidans källkod (högerklicka och välj Visa sidkälla i webbläsaren). Titta på den råa HTML-koden. Finns ditt huvudinnehåll där, eller ser du bara `<div id="root"></div>` och script-taggar?
Om ditt innehåll bara finns i JavaScript har du ett problem. ChatGPT kommer inte att se det.
Så åtgärdar du det: Rendera antingen innehållet på serversidan (så att det finns i det första HTML-svaret) eller använd en förrenderingstjänst som skapar statiska HTML-versioner av dina sidor innan ChatGPT crawlar dem.
Grunden: Bing-indexering
ChatGPT search använder Bings index som sin främsta källa. Innan du oroar dig för OAI-SearchBot ska du se till att Bing kan hitta och indexera dina sidor.
Kontrollera din närvaro i Bing:
- Gå till Bing Webmaster Tools och skapa ett konto
- Lägg till din webbplats och verifiera att du äger den
- Skicka in din XML-sitemap
- Titta i rapporten om indexeringstäckning: vilka sidor är indexerade och vilka är blockerade
- Titta i rapporten om crawlingproblem: finns det fel som hindrar crawlingen
Om Bing inte kan indexera dina sidor kan ChatGPT inte hitta dem. Bing är utgångspunkten.
Vanliga problem med Bing-indexering:
- Sidor som blockeras av robots.txt
- Sidor som returnerar fel (404, 500)
- Sidor bakom inloggning
- Sidor med dålig mobilupplevelse
- Sidor med långa laddningstider
- Problem med duplicerat innehåll
- Saknade metadata
Åtgärda dessa först.
Konfigurera robots.txt för ChatGPT
Din robots.txt styr vilka crawlers som får komma åt din webbplats. Konfigurera den så att ChatGPT:s sökcrawlers släpps in.
Standardupplägg (tillåt alla AI-crawlers för sök): Tillåt OAI-SearchBot, ChatGPT-User och Bingbot. Blockera GPTBot om du inte vill att ditt innehåll används för modellträning.
Exempel på robots.txt:
User-agent: OAI-SearchBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: Bingbot
Allow: /
User-agent: GPTBot
Disallow: /
Om du vill blockera alla AI-crawlers (rekommenderas inte) skulle du stänga ute OAI-SearchBot och ChatGPT-User. Då försvinner du också från sökresultaten i ChatGPT.
Ändringar i robots.txt börjar vanligtvis gälla inom 24 timmar.
Krav på läsbart innehåll
För att ChatGPT ska kunna citera ditt innehåll måste det kunna läsa det. Det innebär:
Ren HTML-struktur
Din HTML ska ha tydliga semantiska taggar. Använd h1, h2, p, ul och table på rätt sätt. Undvik att lägga innehåll i div-element utan semantisk betydelse.
Statiskt innehåll
Ditt huvudinnehåll ska finnas i det första HTML-svaret. Lita inte på JavaScript för att ladda stycken, rubriker eller datatabeller.
Tydliga metadata
Ta med title-taggar, metabeskrivningar och strukturerad data (schema.org-märkning). Det hjälper ChatGPT att förstå vad din sida handlar om.
Inga inloggningshinder
Sidor bakom inloggning kan inte crawlas. Bara offentligt innehåll.
Rimlig sidhastighet
Långsamma sidor kanske inte crawlas helt. Håll laddningstiderna under 3 sekunder.
Strukturerad data (schema-märkning)
Strukturerad data hjälper ChatGPT att förstå ditt innehålls struktur och syfte.
De schematyper som har störst effekt på synlighet i ChatGPT:
Article-schema
Talar om för ChatGPT att det här är en artikel, tillsammans med rubrik, beskrivning, författare och publiceringsdatum. Det här är den vanligaste märkningen för nyheter, bloggar och utbildande innehåll.
FAQ-schema
Markerar avsnitt som vanliga frågor. ChatGPT känner igen det och kan citera FAQ-innehåll lättare.
Organization-schema
Hjälper ChatGPT att förstå vem som har publicerat innehållet och ger trovärdighetssignaler.
Product-schema
För e-handel. Markerar produktuppgifter som pris, betyg och tillgänglighet.
Schema garanterar inte indexering, men det ökar tydligt chansen att ChatGPT förstår ditt innehåll rätt och citerar det på rätt sätt.
Länkarnas och auktoritetens roll
Länkar från andra webbplatser krävs inte för synlighet i ChatGPT (till skillnad från Google), men de hjälper. Kvalitetslänkar från auktoritativa domäner signalerar trovärdighet till ChatGPT:s crawlers.
Viktigare är att sidor som rankar bland de tio främsta på Google och Bing automatiskt anses mer trovärdiga av ChatGPT. Du behöver inte ranka etta, men om du syns i Bing förstärker dina auktoritetssignaler varandra.
Skaffa länkar från:
- Auktoritativa nyhetssajter i din bransch
- Utbildningsinstitutioner och myndighetssajter
- Branschorganisationer
- Relevanta ämnesbloggar med egen auktoritet
Så hjälper WEMASY dig att bli indexerad i ChatGPT
WEMASY:s webbplatsbyggare renderar allt innehåll på serversidan, vilket betyder att ditt innehåll syns i den råa HTML-koden. Inget JavaScript-hinder vid renderingen. Webbplatsbyggaren har inbyggd schema-märkning för artiklar, vanliga frågor och författaruppgifter. Du kan skicka in sitemaps direkt via WEMASY:s integration med Bing Webmaster Tools. Följ din synlighet i ChatGPT och dina Bing-indexeringsmätvärden på en och samma instrumentpanel. Kontrollera din konfiguration med WEMASY:s indexeringsverktyg.
Vanliga frågor
Måste jag finnas i Googles index för att synas i ChatGPT search?
Nej. ChatGPT search använder Bings index, inte Googles. Du kan ranka högt i ChatGPT search utan att synas på Google. Sidor som rankar bra på båda är dock oftast mer auktoritativa och får därför högre prioritet. Med WEMASY:s webbplatsbyggare kan du ställa in detta direkt på din webbplats.
Om jag blockerar GPTBot, hittar ChatGPT search mig då inte?
Jo, den hittar dig. GPTBot är till för modellträning. Att blockera GPTBot påverkar inte synligheten i ChatGPT search. Blockera GPTBot om du inte vill att ditt innehåll används för att träna ChatGPT:s underliggande språkmodell. Det är OAI-SearchBot du måste tillåta för att synas i sök.
Hur lång tid tar det innan ChatGPT indexerar mitt nya innehåll?
Google kan ta veckor, men ChatGPT kan hitta och citera nytt innehåll inom några timmar. OAI-SearchBot söker på webben i realtid för varje fråga. Om din sida går att hitta via Bing och svarar på en fråga som en användare ställer kan du bli citerad samma dag som du publicerar.
Måste jag anmäla min webbplats till ChatGPT för indexering?
Nej, det finns ingen direkt anmälan till ChatGPT. Se till att Bing kan crawla din webbplats och konfigurera robots.txt så att OAI-SearchBot släpps in. Då hittar ChatGPT dig via Bings index och crawlning i realtid.
Mitt innehåll laddas med JavaScript. Kan jag ändå bli indexerad i ChatGPT?
Bara om du också levererar innehållet på serversidan eller använder en förrenderingstjänst. ChatGPT:s crawlers kör inte JavaScript. Om ditt innehåll är beroende av JavaScript ser ChatGPT en tom sida.
Påverkar sidhastigheten indexeringen i ChatGPT?
Ja. Långsamma sidor kanske inte crawlas helt. Sikta på sidor som laddas på under 3 sekunder. Det hjälper både Bings och ChatGPT:s crawlers att hämta sidan effektivt.