# 佐理未来网站 Robots.txt
# 更新时间：2026-08-02

# ===== 特定搜索引擎优化（优先级高）=====

# 针对头条搜索（字节跳动）优化
User-agent: Bytespider
Allow: /
Crawl-delay: 1

# 针对今日头条爬虫优化
User-agent: Toutiaospider
Allow: /
Crawl-delay: 1

# 针对百度搜索引擎优化
User-agent: Baiduspider
Allow: /

# 针对谷歌搜索引擎优化
User-agent: Googlebot
Allow: /
Crawl-delay: 1

# 针对必应搜索引擎优化
User-agent: Bingbot
Allow: /
Crawl-delay: 1

# 针对 360 搜索引擎优化
User-agent: 360Spider
Allow: /

# 针对搜狗搜索引擎优化
User-agent: Sogou web spider
Allow: /

# ===== 通用规则（优先级低）=====

# 允许所有其他搜索引擎抓取全站
User-agent: *
Allow: /

# Sitemap 位置
Sitemap: https://www.zuoliweilai.com/sitemap.xml

# 禁止抓取后台和备份目录
Disallow: /admin-cms/
Disallow: /blog-dir-backup/
Disallow: /cases-dir-backup/

# 禁止抓取用户后台页面
Disallow: /login.html
Disallow: /dashboard.html
Disallow: /settings.html
Disallow: /customers.html
Disallow: /applications.html
Disallow: /customer-detail.html
Disallow: /thank-you.html
Disallow: /admin/