Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 82.039s
停止原因: checkpoint
账号: kget057150@163.com (ID=43), 代理ID: 49
页面: 尝试 14 / 成功 14 / 失败 0
数据: 处理 204 / 新增 132 / 重复 72 / 时间过滤 0 / 归档 100
Mailbox: 成功 59 / 失败 132
吞吐量: 2.49 items/s, 0.17 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.238s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.176s
- 分页抓取: 78.588s
- 历史归档: 0.247s
- 保存Checkpoint: 0.161s
- 保存运行统计: 0.228s
- 发送通知与更新资源统计: 1.400s
调用统计:
- Mailbox写入: 191次, 累计 4.031s, 平均 0.021s, P50 0.014s, P95 0.053s, P99 0.094s, 最大 0.138s
- 代理获取: 16次, 累计 1.539s, 平均 0.096s, P50 0.000s, P95 0.623s, P99 0.623s, 最大 0.916s
- 分页随机等待: 16次, 累计 19.514s, 平均 1.220s, P50 1.145s, P95 1.902s, P99 1.902s, 最大 1.959s
- 响应JSON解析: 15次, 累计 0.025s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 15次, 累计 3.921s, 平均 0.261s, P50 0.077s, P95 1.105s, P99 1.105s, 最大 1.645s
- 批量写入: 14次, 累计 1.398s, 平均 0.100s, P50 0.095s, P95 0.112s, P99 0.112s, 最大 0.126s
- 批量去重查询: 14次, 累计 0.685s, 平均 0.049s, P50 0.046s, P95 0.057s, P99 0.057s, 最大 0.065s
- 藏宝阁HTTP请求: 16次, 累计 35.524s, 平均 2.220s, P50 1.369s, P95 4.753s, P99 4.753s, 最大 5.663s
最慢页面 Top 10:
- page=1, 总耗时=16.491s, 获取=15.794s, 处理=0.697s
- page=2, 总耗时=9.124s, 获取=6.426s, 处理=2.698s
- page=4, 总耗时=7.309s, 获取=6.336s, 处理=0.973s
- page=5, 总耗时=6.743s, 获取=5.879s, 处理=0.864s
- page=7, 总耗时=5.786s, 获取=4.508s, 处理=1.278s
- page=9, 总耗时=5.749s, 获取=5.262s, 处理=0.487s
- page=3, 总耗时=5.728s, 获取=4.379s, 处理=1.349s
- page=8, 总耗时=5.282s, 获取=4.129s, 处理=1.153s
- page=6, 总耗时=3.652s, 获取=2.847s, 处理=0.805s
- page=14, 总耗时=3.191s, 获取=1.960s, 处理=1.231s
==================================================