Legg til eller oppdater en robots.txt-fil
Denne artikkelen beskriver hvordan du oppretter, redigerer, laster opp og validerer robots.txt-filen for hvert domene som drifts i Microsoft Dynamics 365 Commerce.
Uventet eller udirigert kravlesøk av nettstedet ditt av søkemotorer kan forårsake et høyt volum av "404 side ikke funnet"-feil. Disse feilene kan påvirke ytelsen ettersom nettstedet svarer på alle forespørsler om sider som ikke eksisterer. For å hjelpe deg med å løse dette problemet må du sørge for at domenet ditt alltid har en oppdatert og gyldig robots.txt-fil for å instruere indekseringsroboter til å se kun etter relevante sider på nettstedet ditt.
Gjelder
Denne artikkelen gjelder for følgende konfigurasjoner:
- Versjon: Commerce 10.0.16 eller nyere
- Komponent: Bedrift-til-forbruker (B2C) eller bedrift-til-bedrift (B2B)
- Funksjonsområde: Ytelse for handelsnettsted
Forutsetninger
Du er en systemadministrator i din Commerce-forekomst.
Du har enten opprettet en robots.txt-fil på datamaskinen eller lastet ned en kopi, avhengig av situasjonen:
- Hvis du ikke tidligere har lastet opp en robots.txt-fil for domenet ditt, kan du opprette en ny fil på datamaskinen din ved å følge robotutelukkelsestandarden. Bruk robots.txt-eksempelfilen senere i denne artikkelen som utgangspunkt.
- Hvis du tidligere har lastet opp en robots.txt-fil for domenet ditt, må du laste ned den eksisterende filen.
Trinn som må fullføres
Hvis du vil redigere og laste opp en robots.txt-fil, gjør du følgende.
- Åpne din lokale kopi av robots.txt-filen.
- Rediger filen slik at den inkluderer alle Ikke tillat-oppføringer i robots.txt-eksempelfilen som følger.
- Bekreft at filen er riktig formatert i henhold til robotutelukkelsestandarden.
- Last opp filen til nettstedet ditt ved å følge instruksjonene i Laste opp en robots.txt-fil.
Eksempel på robots.txt-filinnhold
User-agent: *
Disallow: /signin
Disallow: /cart
Disallow: /*refiners=
Disallow: /*sorting=
Disallow: /*search?
Disallow: /*search=
Disallow: /*.woff
Disallow: /*.woff2
Disallow: /*skip=
Valider
Bruk følgende metode for å bekrefte at filen er lagt til:
- Beskrivelse eller formål: Bekreft at robots.txt filen er tilgjengelig for domenet ditt.
- Fremgangsmåte for å kjøre: Åpne siden på <your_domain>/robots.txt i en nettleser.
- Passeringsresultat: Du kan vise robots.txt filen.