Robots.txt.liquid bewerken
Zoekmachines zoals Google crawlen voortdurend het internet op zoek naar nieuwe gegevens als bron voor hun zoekresultaten. Het robots.txt-bestand laat bots met zoekmachines, ook wel crawlers genoemd, weten welke pagina's moeten worden opgevraagd vanuit je webshop. Alle Shopify-winkels hebben een standaard robots.txt-bestand dat optimaal is voor Zoekmachineoptimalisatie (SEO).
Je sitemap wordt gebruikt door zoekmachines om je webshop in de zoekmachineresultaten te plaatsen. Ontdek hoe je je sitemap kunt vinden en indienen.
Overzicht
Het standaard robots.txt-bestand werkt voor de meeste winkels, maar je kunt het bestand ook bewerken via de thema-template robots.txt.liquid. Je kunt de volgende bewerkingen maken:
- bepaalde URL's toestaan of weigeren om te crawlen;
- crawl-delayregels toevoegen voor bepaalde crawlers;
- extra sitemap-URL's toevoegen;
- bepaalde crawlers blokkeren.
Het bestand robots.txt bevindt zich in de hoofdmap van de primaire domeinnaam van je Shopify-winkel. Bijvoorbeeld: johns-apparel.com/robots.txt.
Robots.txt.liquid bewerken
Het bewerken van het robots.txt.liquid-bestand vereist ervaring met codebewerking en SEO. Een Shopify-partner kan je hier ook bij helpen.
Je kunt Liquid gebruiken om de inhoud van het robots.txt.liquid-template toe te voegen of te verwijderen. Deze methode behoudt Shopify's mogelijkheid om het bestand in de toekomst automatisch bij te werken, en wordt aanbevolen. Raadpleeg de Shopify-pagina voor ontwikkelaars Customize robots.txt.liquid voor een volledige handleiding voor het bewerken van dit bestand.
Verwijder vorige aanpassingen of tijdelijke oplossingen, zoals het gebruik van een externe service zoals Cloudflare, voordat je het robots.txt.liquid -bestand bewerkt.
Stappen:
Klik in het Shopify-beheercentrum op Instellingen > Apps en verkoopkanalen.
Klik op de pagina Apps en verkoopkanalen op Online store.
Klik op Verkoopkanaal openen.
Klik op Thema's:
Klik op de knop ... en daarna op Code bewerken.
Klik op Een nieuwe template toevoegen en selecteer vervolgens robots.
Klik op Template maken.
Breng de wijzigingen aan die je wilt aanpassen in het standaardtemplate. Raadpleeg de Shopify-pagina voor ontwikkelaars Customize robots.txt.liquid voor meer informatie over liquid variabelen en veelgebruikte gevallen.
Sla wijzigingen op in het bestand robots.txt.liquid in je gepubliceerde thema.
Wijzigingen worden onmiddellijk doorgevoerd, maar crawlers reageren niet altijd onmiddellijk. Je kunt wijzigingen testen met de robots.txt-tester van Google.
Je kunt ook de inhoud van de template verwijderen en deze vervangen door regels van tekst zonder opmaak. Deze methode wordt sterk afgeraden, aangezien regels mogelijk verouderd zijn. Als je deze methode kiest, kan Shopify er niet voor zorgen dat SEO-best practices in de toekomst worden toegepast op je robots.txt of wijzigingen in het bestand aanbrengen met toekomstige updates.
Aanpassingen aan robots.txt.liquid verwijderen
Sla een kopie van je robots.txt.liquid-template op als je het standaard robots.txt-bestand opnieuw wilt gebruiken omdat je de template moet verwijderen, wat niet ongedaan kan worden gemaakt.
Stappen:
Klik in het Shopify-beheercentrum op Instellingen > Apps en verkoopkanalen.
Klik op de pagina Apps en verkoopkanalen op Online store.
Klik op Verkoopkanaal openen.
Klik op Thema's:
Klik op de knop ... en daarna op Code bewerken.
Klik op robots.liquid en klik vervolgens op Bestand verwijderen.
Als je robots.txt.liquid nog steeds wilt verwijderen, klik je op Bestand verwijderen.
Je kunt het robots.txt.liquid-bestand in de toekomst altijd bewerken. Als je je eerdere aanpassingen opgeslagen hebt, kun je je wijzigingen opnieuw maken door over je vorige opgeslagen aanpassingen te kopiëren.