📌  相关文章
📜  robots txt - 任何代码示例

📅  最后修改于: 2022-03-11 14:58:20.398000             🧑  作者: Mango

代码示例1
# Group 1
User-agent: Googlebot
Disallow: /nogooglebot/

# Group 2
User-agent: *
Allow: /

Sitemap: http://www.example.com/sitemap.xml