Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 74.250s
停止原因: checkpoint
账号: ben37191@163.com (ID=34), 代理ID: 40
页面: 尝试 18 / 成功 18 / 失败 0
数据: 处理 254 / 新增 148 / 重复 106 / 时间过滤 0 / 归档 68
Mailbox: 成功 53 / 失败 148
吞吐量: 3.42 items/s, 0.24 pages/s
异常: 请求 1 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.747s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.091s
- 分页抓取: 71.955s
- 历史归档: 0.139s
- 保存Checkpoint: 0.088s
- 保存运行统计: 0.145s
- 发送通知与更新资源统计: 1.083s
调用统计:
- Mailbox写入: 201次, 累计 1.697s, 平均 0.008s, P50 0.007s, P95 0.018s, P99 0.024s, 最大 0.026s
- 代理获取: 21次, 累计 1.990s, 平均 0.095s, P50 0.000s, P95 0.327s, P99 0.327s, 最大 1.357s
- 分页随机等待: 21次, 累计 29.566s, 平均 1.408s, P50 1.380s, P95 1.848s, P99 1.848s, 最大 1.946s
- 响应JSON解析: 20次, 累计 0.034s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.004s
- 响应读取: 20次, 累计 0.946s, 平均 0.047s, P50 0.029s, P95 0.060s, P99 0.060s, 最大 0.449s
- 批量写入: 16次, 累计 1.096s, 平均 0.068s, P50 0.068s, P95 0.072s, P99 0.072s, 最大 0.079s
- 批量去重查询: 17次, 累计 0.396s, 平均 0.023s, P50 0.022s, P95 0.027s, P99 0.027s, 最大 0.028s
- 藏宝阁HTTP请求: 21次, 累计 27.623s, 平均 1.315s, P50 0.486s, P95 1.284s, P99 1.284s, 最大 15.001s
最慢页面 Top 10:
- page=5, 总耗时=25.777s, 获取=25.573s, 处理=0.204s
- page=4, 总耗时=8.546s, 获取=8.181s, 处理=0.366s
- page=1, 总耗时=4.287s, 获取=3.855s, 处理=0.433s
- page=2, 总耗时=2.768s, 获取=2.490s, 处理=0.278s
- page=3, 总耗时=2.757s, 获取=2.420s, 处理=0.337s
- page=6, 总耗时=2.691s, 获取=2.384s, 处理=0.306s
- page=14, 总耗时=2.624s, 获取=2.334s, 处理=0.289s
- page=8, 总耗时=2.507s, 获取=2.169s, 处理=0.339s
- page=13, 总耗时=2.475s, 获取=2.127s, 处理=0.348s
- page=16, 总耗时=2.172s, 获取=1.951s, 处理=0.221s
==================================================