Robot.TXT

Wat is het Robots.txt bestand?
Het robots.txt bestand communiceert de omgangsregels van jouw website voor zoekmachines. Voordat een zoekmachine normale pagina’s op jouw website bezoekt, probeert het eerst het robots.txt bestand op te halen om te kijken of er speciale instructies zijn voor het crawlen (ophalen) van jouw website.

Het robots.txt bestand is erg belangrijk vanuit zoekmachine optimalisatie (SEO) oogpunt. Het vertelt zoekmachines namelijk hoe ze jouw website het beste kunnen crawlen (ophalen). Met het robots.txt bestand kun je zoekmachines toegang tot bepaalde delen van jouw website verbieden, duplicate content problemen voorkomen, en bij zoekmachines aangeven hoe ze jouw website efficiënter kunnen crawlen.

App installeren:  
Je dient ten eerste de app ‘Robot TXT' te installeren vanuit de App Store. Deze kun je vinden via de onderhoudstool van je webshop bij: ‘Startpunt > App Store’ Deze app is gratis.

Wanneer je de Robot.txt app activeert wordt het mogelijk om de robot.txt van jouw webshop aan te passen.
Let op: één fout en jouw webshop kan verkeerd worden geïndexeerd, waardoor je positie in de zoekresultaten kan verslechteren.

Instellingen Robot.txt
Je kunt de instellingen van de Robot.txt vinden via Startpunt > Mijn Webshop > Instellingen > Algemeen > SEO.

Standaard is er al een stukje robot.txt ingevuld, dit is gedaan om de werking van de shops te garanderen.