Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 51.186s
停止原因: checkpoint
账号: ba48997@163.com (ID=39), 代理ID: 24
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 283 / 新增 181 / 重复 102 / 时间过滤 0 / 归档 81
Mailbox: 成功 103 / 失败 181
吞吐量: 5.53 items/s, 0.37 pages/s
异常: 请求 1 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.204s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.174s
- 分页抓取: 45.244s
- 历史归档: 0.259s
- 保存Checkpoint: 0.165s
- 保存运行统计: 0.222s
- 发送通知与更新资源统计: 3.916s
调用统计:
- Mailbox写入: 284次, 累计 2.811s, 平均 0.010s, P50 0.009s, P95 0.019s, P99 0.037s, 最大 0.057s
- 代理获取: 20次, 累计 1.411s, 平均 0.071s, P50 0.000s, P95 0.593s, P99 0.593s, 最大 0.817s
- 分页随机等待: 20次, 累计 22.506s, 平均 1.125s, P50 1.102s, P95 1.810s, P99 1.810s, 最大 1.911s
- 响应JSON解析: 19次, 累计 0.034s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.003s
- 响应读取: 19次, 累计 0.405s, 平均 0.021s, P50 0.018s, P95 0.057s, P99 0.057s, 最大 0.057s
- 批量写入: 17次, 累计 2.195s, 平均 0.129s, P50 0.091s, P95 0.320s, P99 0.320s, 最大 0.461s
- 批量去重查询: 19次, 累计 0.886s, 平均 0.047s, P50 0.044s, P95 0.056s, P99 0.056s, 最大 0.060s
- 藏宝阁HTTP请求: 20次, 累计 12.284s, 平均 0.614s, P50 0.553s, P95 1.238s, P99 1.238s, 最大 1.265s
最慢页面 Top 10:
- page=11, 总耗时=4.382s, 获取=4.030s, 处理=0.352s
- page=1, 总耗时=3.490s, 获取=3.004s, 处理=0.486s
- page=3, 总耗时=3.029s, 获取=2.554s, 处理=0.475s
- page=14, 总耗时=2.893s, 获取=2.131s, 处理=0.762s
- page=15, 总耗时=2.848s, 获取=2.416s, 处理=0.432s
- page=6, 总耗时=2.836s, 获取=2.517s, 处理=0.319s
- page=8, 总耗时=2.503s, 获取=1.904s, 处理=0.599s
- page=2, 总耗时=2.365s, 获取=2.011s, 处理=0.354s
- page=9, 总耗时=2.355s, 获取=1.842s, 处理=0.513s
- page=10, 总耗时=2.182s, 获取=1.675s, 处理=0.507s
==================================================