Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 63.821s
停止原因: checkpoint
账号: pq21188@163.com (ID=172), 代理ID: 28
页面: 尝试 15 / 成功 15 / 失败 0
数据: 处理 214 / 新增 132 / 重复 82 / 时间过滤 0 / 归档 130
Mailbox: 成功 69 / 失败 132
吞吐量: 3.35 items/s, 0.24 pages/s
异常: 请求 1 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.432s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.206s
- 分页抓取: 58.721s
- 历史归档: 0.275s
- 保存Checkpoint: 0.160s
- 保存运行统计: 0.229s
- 发送通知与更新资源统计: 2.798s
调用统计:
- Mailbox写入: 201次, 累计 2.154s, 平均 0.011s, P50 0.009s, P95 0.022s, P99 0.040s, 最大 0.073s
- 代理获取: 16次, 累计 1.972s, 平均 0.123s, P50 0.000s, P95 0.790s, P99 0.790s, 最大 1.182s
- 分页随机等待: 16次, 累计 20.641s, 平均 1.290s, P50 1.139s, P95 1.871s, P99 1.871s, 最大 1.904s
- 响应JSON解析: 15次, 累计 0.027s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.004s
- 响应读取: 15次, 累计 0.064s, 平均 0.004s, P50 0.002s, P95 0.004s, P99 0.004s, 最大 0.032s
- 批量写入: 14次, 累计 1.508s, 平均 0.108s, P50 0.108s, P95 0.111s, P99 0.111s, 最大 0.112s
- 批量去重查询: 15次, 累计 0.796s, 平均 0.053s, P50 0.053s, P95 0.055s, P99 0.055s, 最大 0.057s
- 藏宝阁HTTP请求: 16次, 累计 28.754s, 平均 1.797s, P50 0.773s, P95 2.536s, P99 2.536s, 最大 15.002s
最慢页面 Top 10:
- page=2, 总耗时=19.456s, 获取=18.967s, 处理=0.488s
- page=5, 总耗时=5.053s, 获取=4.301s, 处理=0.752s
- page=11, 总耗时=3.226s, 获取=2.591s, 处理=0.635s
- page=3, 总耗时=3.049s, 获取=2.559s, 处理=0.490s
- page=6, 总耗时=3.033s, 获取=2.714s, 处理=0.320s
- page=1, 总耗时=2.985s, 获取=2.417s, 处理=0.568s
- page=4, 总耗时=2.829s, 获取=2.345s, 处理=0.484s
- page=15, 总耗时=2.654s, 获取=2.565s, 处理=0.089s
- page=9, 总耗时=2.572s, 获取=1.915s, 处理=0.658s
- page=14, 总耗时=2.532s, 获取=2.140s, 处理=0.391s
==================================================