Check je robots.txt: blokkeer je ChatGPT en Perplexity zonder het te weten?
In tien minuten controleren of je site AI-crawlers buitensluit. Welke bots je nooit mag blokkeren, welke je gerust mag weren, en een robots.txt-blok om te kopiëren.
Lees het artikel ↗