robots.txt 生成

勾选常用规则,生成 robots.txt 文本。

robots.txt

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /private/
Sitemap: https://example.com/sitemap.xml