robots.txt-bestanden beheren

Artikel
03/08/2023

In dit artikel wordt beschreven hoe u robots.txt-bestanden beheert in Microsoft Dynamics 365 Commerce.

De uitsluitingsstandaard voor robots, of robots.txt, is een standaard die websites gebruiken om te communiceren met webrobots. Hiermee worden webrobots geïnstrueerd over de gebieden van een website die niet bezocht mogen worden. Robots worden vaak gebruikt door zoekmachines om websites te indexeren.

Als u robots wilt uitsluiten van een server, maakt u een bestand op de server. In dit bestand geeft u een toegangsbeleid voor robots op. Het bestand moet toegankelijk zijn via HTTP op de lokale URL /robots.txt. Met het robots.txt-bestand kunnen zoekmachines de inhoud op uw site indexeren.

Met Dynamics 365 Commerce kunt u een robots.txt-bestand voor uw domein uploaden. Voor elk domein in uw Commerce-omgeving kunt u één robots.txt-bestand uploaden en aan dat domein koppelen.

Ga voor meer informatie over het robots.txt-bestand naar de pagina's voor webrobots.

Een robots.txt-bestand uploaden

Nadat u uw robots.txt-bestand hebt gemaakt en bewerkt volgens de standaard voor robotuitsluiting, moet u ervoor zorgen dat het bestand toegankelijk is op de computer waarop u de Commerce-ontwerpfunctie gaat gebruiken. Het bestand moet de naam robots.txthebben. Voor de beste resultaten moet deze in indeling hebben die wordt vermeld in de standaard. Elke Commerce-klant is verantwoordelijk voor het valideren en onderhouden van de inhoud van zijn of haar eigen robots.txt-bestand. Als u een robots.txt-bestand wilt uploaden, moet u bij Commerce zijn aangemeld als systeembeheerder.

Volg deze stappen om een robots.txt-bestand te uploaden in Commerce.

Meld u aan bij Commerce als systeembeheerder.
Selecteer in het linkernavigatievenster de optie Tenantinstellingen (naast het tandwielsymbool) om deze uit te vouwen.
Selecteer Robots.txt onder Tenantinstellingen. In het hoofdgedeelte van het venster wordt een lijst weergegeven met alle domeinen die aan uw omgeving zijn gekoppeld.
Selecteer Beheren om een robots.txt-bestand te uploaden voor een domein in uw omgeving.
Selecteer in het menu aan de rechterkant de knop Uploaden (de omhoog wijzende pijl) naast het domein dat aan het robots.txt-bestand is gekoppeld. Er verschijnt een dialoogvenster waarin u naar het bestand kunt bladeren.
Selecteer in dit dialoogvenster het robots.txt-bestand dat u wilt uploaden voor het gekoppelde domein en selecteer vervolgens Openen om het uploaden te voltooien.

Notitie

Tijdens het uploaden wordt geverifieerd of het bestand een tekstbestand is, maar de inhoud van het bestand wordt niet gevalideerd.

Een robots.txt-bestand downloaden

Volg deze stappen om een robots.txt-bestand te downloaden in Commerce.

Meld u aan bij Commerce als systeembeheerder.
Selecteer in het linkernavigatievenster de optie Tenantinstellingen (naast het tandwielsymbool) om deze uit te vouwen.
Selecteer Robots.txt onder Tenantinstellingen. In het hoofdgedeelte van het venster wordt een lijst weergegeven met alle domeinen die aan uw omgeving zijn gekoppeld.
Selecteer Beheren om een robots.txt-bestand te downloaden voor een domein in uw omgeving.
Selecteer in het menu aan de rechterkant de knop Downloaden (de omlaag wijzende pijl) naast het domein dat aan het robots.txt-bestand is gekoppeld. Er verschijnt een dialoogvenster waarin u naar het bestand kunt bladeren.
Ga in het dialoogvenster naar de gewenste locatie op uw lokale station, bevestig of voer een bestandsnaam in en selecteer vervolgens Opslaan om de download te voltooien.

Notitie

Deze procedure kan alleen worden gebruikt om robots.txt-bestanden te downloaden die eerder zijn geüpload via de Commerce-ontwerpfunctie.

Een robots.txt-bestand verwijderen

Volg deze stappen om een robots.txt-bestand te verwijderen in Commerce.

Meld u aan bij Commerce als systeembeheerder.
Selecteer in het linkernavigatievenster de optie Tenantinstellingen (naast het tandwielsymbool) om deze uit te vouwen.
Selecteer Robots.txt onder Tenantinstellingen. In het hoofdgedeelte van het venster wordt een lijst weergegeven met alle domeinen die aan uw omgeving zijn gekoppeld.
Selecteer Beheren om een robots.txt-bestand te verwijderen voor een domein in uw omgeving.
Selecteer in het menu aan de rechterkant de knop Verwijderen (de prullenbak) naast het domein dat aan het robots.txt-bestand is gekoppeld. Er verschijnt een venster waarin u naar het bestand kunt bladeren.
Selecteer in dit venster het robots.txt-bestand dat u wilt verwijderen voor het gekoppelde domein en selecteer vervolgens Openen. Er verschijnt een waarschuwingsvenster.
Selecteer in dit berichtvak de optie Verwijderen om de verwijdering van het robots.txt-bestand te bevestigen.