Kapittel 1 · 1.3
Sitemap og robots.txt i AI Builder
Lager du nettstedet ditt med AI Builder, ordner AI Builder det tekniske for søkemotorene selv. Hver gang du publiserer, legger den en ny sitemap.xml og en robots.txt i nettmappen til nettstedet ditt. Du trenger bare å sjekke at nettstedet er satt som synlig.
Dette lager AI Builder
- sitemap.xml med alle sider som er synlige i søk, også innleggene på nyhetssiden din, med datoen for siste endring for hver side. Har nettstedet ditt flere språk, er alle språkversjonene med.
- robots.txt med linjene
User-agent: *,Allow: /ogSitemap:med adressen til sitemapen din. - En canonical-lenke på hver side, og bedriftsopplysningene dine som strukturerte data hvis du fyller dem ut under Bedriftsopplysninger.
- Et varsel via IndexNow etter hver publisering (se IndexNow: meld endringer selv).

Er nettstedet ditt satt som synlig?
- Gå til AI Builder i Min side, og klikk på Åpne i byggeren ved nettstedet ditt.
- Klikk på SEO (1) i menylinjen til venstre.
- Velg Hele nettstedet øverst, og utvid Synlighet i søk.
- Slå på Nettstedet synlig i Google (2).
- Klikk på Publiser endringer øverst til høyre. Først da gjelder den nye innstillingen på det ekte nettstedet ditt.

Er bryteren slått av, setter AI Builder Disallow: / i robots.txt og noindex på hver side. Da hopper søkemotorene over hele nettstedet ditt. Det er nyttig mens du fortsatt bygger. Husk å slå den på når nettstedet er ferdig.
Vil du holde én enkelt side utenfor Google, for eksempel en takkeside? Velg da Denne siden øverst, og slå av Denne siden synlig i Google. Siden forsvinner fra sitemapen og får noindex.
Merk: Et gratis nettsted på en adresse fra oss, som navn.weboke.site, er aldri synlig i søkemotorer, heller ikke når bryteren er slått på. Google Search Console og Bing Webmaster Tools har da ingen hensikt. Nettstedet ditt må ligge på ditt eget domene, med pakken AI Builder (se AI Builder: tilpasse, versjoner og publisere).
Sjekk
Åpne dette i nettleseren etter at du har publisert:
https://dittdomene.no/robots.txt: her skal det ståAllow: /og en linje medSitemap:.https://dittdomene.no/sitemap.xml: her skal adressene til sidene dine stå, med ditt eget domene.
Verifisering for Google og Bing
I det samme panelet finner du blokken Verifisering for Google og Bing. Den trenger du ikke hvis du verifiserer domenet ditt med en TXT-post i DNS, som i Bekreft domenet ditt i Min side. Det er også det vi anbefaler.
Bruker du likevel en eiendom av typen URL-prefiks med metoden HTML-tagg i Google Search Console, eller metoden meta-tagg i Bing Webmaster Tools? Da limer du inn koden her. Lim bare inn selve koden: delen som står mellom anførselstegnene etter content= i meta-taggen. AI Builder legger selv meta-taggen rundt. Publiser deretter, og klikk først da på verifiser.

