Administrere robots.txt-filer

I denne artikel beskrives det, hvordan du administrerer robots.txt filer i Microsoft Dynamics 365 e-handel.

Standarden for "robots exclusion standard" eller robots.txt er en standard, som websteder bruger til at kommunikere med webrobotter. Det instruerer webrobotter om alle områder af et websted, der ikke skal besøges. Robotter bruges ofte af søgemaskiner til at indeksere websteder.

Hvis du vil udelade robotter fra en server, skal du oprette en fil på serveren. I denne fil skal du angive en adgangspolitik for robotter. Filen skal være tilgængelig via HTTP på den lokale URL-adresse /robots.txt. Robots.txt-filen hjælper søgemaskiner med at indeksere indholdet på dit websted.

Dynamics 365 Commerce giver dig mulighed for at uploade en robots.txt-fil til dit domæne. Du kan uploade en robots.txt-fil for hvert domæne i dit Commerce-miljø og knytte den til det pågældende domæne.

Du finder flere oplysninger om robots-txt-filer på Siderne om webrobotter.

Sådan fungerer robots.txt med forskellige domænetyper

Robots.txt funktionsmåde varierer, afhængigt af hvilken type domæne der bruges til at få adgang til dit Commerce-websted.

Brugerdefinerede produktionsdomæner

Når du uploader en robots.txt fil til et brugerdefineret domæne, f.eks www.fabrikam.com. , betjenes denne fil, når søgemaskiner eller brugere får adgang til /robots.txt på dit produktionswebsted. Denne metode gør det muligt for søgemaskiner at indeksere dit websted i henhold til dine konfigurerede regler.

Interne Commerce-genererede domæner

Interne domæner, der bruger .dynamics365commerce.ms formatet, betjener den overførte robots.txt-fil på samme måde som brugerdefinerede produktionsdomæner. Alle HTTP-svar fra disse domæner omfatter dog headeren X-Robots-Tag: noindex, nofollow , som instruerer søgemaskinerne i ikke at indeksere eller følge links på disse sider. Du kan få flere oplysninger i X-Robots-Tag svarheader for interne domæner.

X-Robots-Tag svar-header for interne domæner

Fra og med prøveversionen af Commerce version 10.0.48 omfatter alle HTTP-svar fra interne Commerce-genererede domæner (.dynamics365commerce.ms) en X-Robots-Tag: noindex, nofollow svarheader. Denne ændring gælder automatisk for alle lejere og kræver ikke nogen versionsopgradering. Overskriften instruerer søgemaskinerne i ikke at indeksere siden og ikke at følge nogen links på den. Det hjælper også søgemaskiner med at gennemsøge sider og finde direktivet noindex , som fjerner tidligere indekseret indhold fra søgeresultater.

Test robots.txt for et bestemt domæne

Hvis du vil have vist, hvordan din robots.txt-fil vises for et bestemt brugerdefineret domæne, når du får adgang fra et internt Commerce-genereret domæne, skal du føje forespørgselsparameteren ?domain= til den robots.txt URL-adresse.

Hvis dit interne domæne f.eks. er https://<e-commerce-tenant-name>.dynamics365commerce.ms , og dit brugerdefinerede domæne er <your-custom-domain>, skal du bruge følgende URL-adresse:

https://<e-commerce-tenant-name>.dynamics365commerce.ms/robots.txt?domain=<your-custom-domain>

Denne metode giver dig mulighed for at bekræfte robots.txt konfiguration for alle dine understøttede værtsnavne, før du går live med dit produktionsdomæne. Du kan få flere oplysninger om commerce-genererede URL-adresser under Url-adresser, der er genereret af Commerce. Du kan få flere oplysninger om konfiguration af brugerdefinerede domæner under Konfigurer dit domænenavn.

Overfør en robots.txt-fil

Når du har oprettet og redigeret din robots.txt-fil i henhold til standarden for udeladelse af robotter, skal du sørge for at få adgang til filen på den computer, hvor du bruger Værktøjer til oprettelse af Commerce. Filen skal have navnet robots.txt. Du får de bedste resultater ved at bruge det format, der er angivet i standarden. Hver Commerce-kunde er ansvarlig for at validere og vedligeholde indholdet af robots.txt-filen. Log på Commerce som systemadministrator for at uploade en robots.txt fil.

Hvis du vil uploade en robots.txt fil i Commerce, skal du følge disse trin:

1. Log ind på Commerce som systemadministrator.
2. I venstre navigationsrude skal du vælge Lejerindstillinger (ud for tandhjulssymbolet) for at udvide det.
3. Under Lejerindstillinger skal du vælge Robots.txt. En liste over alle de domæner, der er tilknyttet dit miljø, vises i hoveddelen af vinduet.
4. Vælg Administrer for at overføre en robots.txt-fil til et domæne i dit miljø.
5. I menuen til højre skal du vælge knappen Overfør (den opadpegende pil) ud for det domæne, der er knyttet til filen robots.txt. Der vises en dialogboks med en filbrowser.
6. Find og vælg den robots.txt-fil, du vil overføre til det tilknyttede domæne, i dialogboksen, og vælg derefter Åbn for at fuldføre overførslen.

Download en robots.txt-fil

Hvis du vil downloade en robots.txt fil i Commerce, skal du følge disse trin:

1. Log ind på Commerce som systemadministrator.
2. I venstre navigationsrude skal du vælge Lejerindstillinger (ud for tandhjulssymbolet) for at udvide det.
3. Under Lejerindstillinger skal du vælge Robots.txt. En liste over alle de domæner, der er tilknyttet dit miljø, vises i hoveddelen af vinduet.
4. Vælg Administrer for at downloade en robots.txt-fil til et domæne i dit miljø.
5. I menuen til højre skal du vælge knappen Download (den nedadpegende pil) ud for det domæne, der er knyttet til filen robots.txt. Der vises en dialogboks med en filbrowser.
6. Gå til den ønskede placering på det lokale drev i dialogboksen, bekræft eller indtast et filnavn, og vælg derefter Gem for at fuldføre downloadet.

Slet en robots.txt-fil

Hvis du vil slette en robots.txt-fil i Commerce, skal du følge disse trin:

1. Log ind på Commerce som systemadministrator.
2. I venstre navigationsrude skal du vælge Lejerindstillinger (ud for tandhjulssymbolet) for at udvide det.
3. Under Lejerindstillinger skal du vælge Robots.txt. En liste over alle de domæner, der er tilknyttet dit miljø, vises i hoveddelen af vinduet.
4. Vælg Administrer for at slette en robots.txt-fil for et domæne i dit miljø.
5. I menuen til højre skal du vælge knappen Slet (skraldespandssymbolet) ud for det domæne, der er knyttet til filen robots.txt. Der vises et vindue med en filbrowser.
6. Find og vælg den robots.txt-fil, du vil slette for det tilknyttede domæne, i filbrowservinduet, og vælg derefter Åbn. Der vises en advarselsmeddelelse.
7. I meddelelsesfeltet skal du vælge Slet for at bekræfte sletningen af robots.txt-filen.

Flere ressourcer

• Konfigurere dit domænenavn
• Implementere en ny e-handelslejer
• Oprette et websted for e-handel
• Tilknytte et Dynamics 365 Commerce-websted til en onlinekanal
• Masseoverføre omdirigeringer af URL-adresser
• Konfigurere en B2C-lejer i Commerce
• Konfigurere brugerdefinerede sider til brugerlogon
• Konfigurere flere B2C-lejere i et Commerce-miljø
• Tilføje understøttelse af et netværk, der leverer indhold (CDN)
• Aktivere registrering af lokationsbaseret lager