Gratis tool

Robots.txt Generator

Bouw in een paar klikken een schoon, standaardconform robots.txt-bestand. Kies uw platform, blokkeer gevoelige mappen en download een gebruiksklaar bestand.

1. Platform / CMS

Voegt aanbevolen regels toe voor uw systeem.

2. Toegang voor crawlers

3. Mappen om te blokkeren

Eén pad per regel, bijv. /admin/

4. Opties

robots.txt


                
                

Plaats dit bestand in de root van uw domein: https://uwsite.nl/robots.txt

Wat doet het robots.txt-bestand?

Het robots.txt-bestand vertelt zoekmachines welke delen van uw site ze wel of niet mogen crawlen. Een goed ingesteld bestand houdt gevoelige pagina's (beheer, winkelwagen, interne zoekresultaten) buiten de crawl en helpt bots hun budget te richten op de pagina's die ertoe doen.

Eén fout in dit bestand kan per ongeluk uw hele site uit Google blokkeren. Wilt u een volledige technische audit voor uw Rotterdamse bedrijf? Ons team regelt het.

Technische audit aanvragen