# robots.txt for putuo5.com # 最后更新: 2026-11-14 User-agent: * Allow: / Disallow: /404.html # 站点不使用后台目录,以下仅为防御性声明 Disallow: /admin/ Disallow: /private/ Disallow: /includes/ # 允许所有主流搜索引擎爬虫 User-agent: Baiduspider Allow: / User-agent: Googlebot Allow: / User-agent: Bingbot Allow: / User-agent: Sogou web spider Allow: / User-agent: 360Spider Allow: / # 网站地图位置 Sitemap: http://putuo5.com/sitemap.xml # 爬取延迟(可选,单位为秒) # Crawl-delay: 1