Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 83.036s
停止原因: checkpoint
账号: fu81044422@163.com (ID=24), 代理ID: 63
页面: 尝试 20 / 成功 20 / 失败 0
数据: 处理 288 / 新增 166 / 重复 122 / 时间过滤 0 / 归档 194
Mailbox: 成功 55 / 失败 166
吞吐量: 3.47 items/s, 0.24 pages/s
异常: 请求 1 / 解析 0 / 状态异常 2 / 密保 2 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.936s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.113s
- 分页抓取: 78.869s
- 历史归档: 0.277s
- 保存Checkpoint: 0.113s
- 保存运行统计: 0.183s
- 发送通知与更新资源统计: 2.542s
调用统计:
- Mailbox写入: 221次, 累计 1.914s, 平均 0.009s, P50 0.007s, P95 0.017s, P99 0.025s, 最大 0.047s
- 代理获取: 23次, 累计 5.132s, 平均 0.223s, P50 0.000s, P95 1.434s, P99 1.498s, 最大 1.819s
- 分页随机等待: 23次, 累计 25.002s, 平均 1.087s, P50 0.918s, P95 1.908s, P99 1.951s, 最大 1.963s
- 响应JSON解析: 22次, 累计 0.035s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.003s
- 响应读取: 22次, 累计 0.803s, 平均 0.037s, P50 0.009s, P95 0.029s, P99 0.030s, 最大 0.575s
- 批量写入: 17次, 累计 1.405s, 平均 0.083s, P50 0.082s, P95 0.086s, P99 0.086s, 最大 0.086s
- 批量去重查询: 20次, 累计 0.555s, 平均 0.028s, P50 0.027s, P95 0.030s, P99 0.030s, 最大 0.032s
- 藏宝阁HTTP请求: 23次, 累计 29.912s, 平均 1.301s, P50 0.585s, P95 5.466s, P99 5.575s, 最大 6.608s
最慢页面 Top 10:
- page=3, 总耗时=17.168s, 获取=16.771s, 处理=0.397s
- page=12, 总耗时=14.328s, 获取=14.163s, 处理=0.165s
- page=5, 总耗时=7.749s, 获取=7.384s, 处理=0.366s
- page=11, 总耗时=4.551s, 获取=4.152s, 处理=0.399s
- page=15, 总耗时=4.066s, 获取=3.633s, 处理=0.433s
- page=1, 总耗时=3.604s, 获取=3.177s, 处理=0.427s
- page=16, 总耗时=2.930s, 获取=2.623s, 处理=0.307s
- page=10, 总耗时=2.404s, 获取=2.088s, 处理=0.316s
- page=14, 总耗时=2.329s, 获取=1.974s, 处理=0.355s
- page=9, 总耗时=2.323s, 获取=1.931s, 处理=0.393s
==================================================