Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 70.792s
停止原因: checkpoint
账号: bmqt3518@163.com (ID=119), 代理ID: 37
页面: 尝试 21 / 成功 21 / 失败 0
数据: 处理 312 / 新增 188 / 重复 124 / 时间过滤 0 / 归档 100
Mailbox: 成功 68 / 失败 188
吞吐量: 4.41 items/s, 0.30 pages/s
异常: 请求 0 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.821s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.099s
- 分页抓取: 68.257s
- 历史归档: 0.180s
- 保存Checkpoint: 0.091s
- 保存运行统计: 0.147s
- 发送通知与更新资源统计: 1.196s
调用统计:
- Mailbox写入: 256次, 累计 2.856s, 平均 0.011s, P50 0.009s, P95 0.023s, P99 0.030s, 最大 0.040s
- 代理获取: 23次, 累计 2.409s, 平均 0.105s, P50 0.000s, P95 0.000s, P99 0.967s, 最大 1.442s
- 分页随机等待: 23次, 累计 25.471s, 平均 1.107s, P50 1.018s, P95 1.845s, P99 1.886s, 最大 1.953s
- 响应JSON解析: 23次, 累计 0.036s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 23次, 累计 0.239s, 平均 0.010s, P50 0.007s, P95 0.025s, P99 0.040s, 最大 0.044s
- 批量写入: 19次, 累计 1.358s, 平均 0.071s, P50 0.071s, P95 0.076s, P99 0.076s, 最大 0.080s
- 批量去重查询: 21次, 累计 0.509s, 平均 0.024s, P50 0.024s, P95 0.028s, P99 0.028s, 最大 0.031s
- 藏宝阁HTTP请求: 23次, 累计 24.799s, 平均 1.078s, P50 0.530s, P95 2.659s, P99 5.429s, 最大 5.491s
最慢页面 Top 10:
- page=1, 总耗时=14.953s, 获取=14.396s, 处理=0.557s
- page=18, 总耗时=7.649s, 获取=7.380s, 处理=0.269s
- page=21, 总耗时=6.107s, 获取=5.983s, 处理=0.124s
- page=20, 总耗时=3.920s, 获取=3.670s, 处理=0.250s
- page=15, 总耗时=2.854s, 获取=2.395s, 处理=0.459s
- page=13, 总耗时=2.710s, 获取=2.520s, 处理=0.190s
- page=16, 总耗时=2.669s, 获取=2.333s, 处理=0.336s
- page=9, 总耗时=2.588s, 获取=2.047s, 处理=0.540s
- page=7, 总耗时=2.494s, 获取=2.121s, 处理=0.374s
- page=17, 总耗时=2.261s, 获取=1.818s, 处理=0.443s
==================================================