robots.txt

Textdatei im Website-Root, die Crawlern sagt, welche Bereiche sie dürfen oder nicht dürfen (z.B. /admin blockieren, Sitemap verlinken).

[ 02 / 02 ]CTA

Mehr Fachbegriffe entdecken

Durchstöbern Sie 127 Fachbegriffe aus SEO, Web-Technologie, KI und E-Commerce — alle verständlich erklärt.