Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 104.212s
停止原因: checkpoint
账号: q066387@163.com (ID=77), 代理ID: 31
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 274 / 新增 186 / 重复 88 / 时间过滤 0 / 归档 100
Mailbox: 成功 92 / 失败 186
吞吐量: 2.63 items/s, 0.18 pages/s
异常: 请求 1 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.352s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.196s
- 分页抓取: 100.627s
- 历史归档: 0.227s
- 保存Checkpoint: 0.140s
- 保存运行统计: 0.196s
- 发送通知与更新资源统计: 1.473s
调用统计:
- Mailbox写入: 278次, 累计 4.151s, 平均 0.015s, P50 0.010s, P95 0.032s, P99 0.112s, 最大 0.217s
- 代理获取: 22次, 累计 2.605s, 平均 0.118s, P50 0.000s, P95 0.765s, P99 0.824s, 最大 1.016s
- 分页随机等待: 22次, 累计 27.642s, 平均 1.256s, P50 1.198s, P95 1.889s, P99 1.920s, 最大 1.951s
- 响应JSON解析: 21次, 累计 0.038s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.005s
- 响应读取: 21次, 累计 3.625s, 平均 0.173s, P50 0.003s, P95 0.538s, P99 0.538s, 最大 1.695s
- 批量写入: 18次, 累计 1.765s, 平均 0.098s, P50 0.096s, P95 0.107s, P99 0.107s, 最大 0.114s
- 批量去重查询: 19次, 累计 0.898s, 平均 0.047s, P50 0.046s, P95 0.054s, P99 0.054s, 最大 0.055s
- 藏宝阁HTTP请求: 22次, 累计 41.746s, 平均 1.898s, P50 0.419s, P95 4.899s, P99 5.004s, 最大 7.105s
最慢页面 Top 10:
- page=1, 总耗时=25.723s, 获取=25.043s, 处理=0.680s
- page=5, 总耗时=9.258s, 获取=6.719s, 处理=2.539s
- page=2, 总耗时=8.911s, 获取=8.226s, 处理=0.684s
- page=6, 总耗时=7.184s, 获取=6.774s, 处理=0.410s
- page=4, 总耗时=5.884s, 获取=4.031s, 处理=1.853s
- page=3, 总耗时=5.540s, 获取=4.709s, 处理=0.831s
- page=8, 总耗时=5.019s, 获取=4.652s, 处理=0.366s
- page=7, 总耗时=4.976s, 获取=4.568s, 处理=0.407s
- page=9, 总耗时=4.935s, 获取=4.438s, 处理=0.497s
- page=10, 总耗时=4.042s, 获取=3.591s, 处理=0.451s
==================================================