User-agent: *
Allow: /
Disallow: /admin/
Disallow: /private/

# 指定sitemap位置
Sitemap: https://xiaodingzi.com/sitemap.xml

# 爬虫延迟（单位：秒）
Crawl-delay: 1

# 指定特定爬虫的规则
User-agent: Googlebot
Allow: /
Crawl-delay: 0

User-agent: Baiduspider
Allow: /
Crawl-delay: 1