< Alle onderwerpen SEO Termen R Robots.txt Een XML-bestand dat een lijst van alle pagina’s op een website bevat en wordt ingediend bij zoekmachines om te helpen bij het crawlen.