# robots.txt User-Agent: * # 禁止爬取后台管理页面 Disallow: /admin # 禁止爬取 API 接口 Disallow: /api/