# 为所有爬虫(包括 Googlebot)提供指令 User-agent: * # 允许爬取所有公开内容 Allow: / # 禁止爬取敏感页面(根据你之前的文件名建议) Disallow: /404.html Disallow: /.env Disallow: /cgi- Disallow: /wp- Disallow: /admin Disallow: /.git Disallow: /xmlrpc.php Disallow: /phpMyAdmin Sitemap: https://igcsegradecalc.site/sitemap.xml