mcp-bot-crawler

扫描我的网站机器人流量，识别近7天内访问最频繁的爬虫，区分搜索引擎、监控工具和可疑机器人，并给出风险等级与处置建议。

一份机器人流量分析报告，包含分类结果、异常来源、风险判断和治理建议。

根据当前网站的机器人访问情况，生成一套治理策略：允许的搜索引擎机器人、需要限速的高频访问机器人、建议拦截的可疑来源，并说明每条规则的依据。

一套可执行的机器人治理规则清单，附带分类依据和策略说明。

分析机器人流量对网站带宽、响应时间和关键页面访问的影响，找出最耗资源的机器人行为，并提出优化与防护建议。

一份影响评估结果，说明资源消耗来源及对应的性能优化方案。