Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 142.235s
停止原因: checkpoint
账号: p453319@163.com (ID=147), 代理ID: 38
页面: 尝试 26 / 成功 26 / 失败 0
数据: 处理 380 / 新增 242 / 重复 138 / 时间过滤 0 / 归档 311
Mailbox: 成功 98 / 失败 242
吞吐量: 2.67 items/s, 0.18 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.421s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.215s
- 分页抓取: 137.310s
- 历史归档: 0.465s
- 保存Checkpoint: 0.160s
- 保存运行统计: 0.222s
- 发送通知与更新资源统计: 2.441s
调用统计:
- Mailbox写入: 340次, 累计 2.704s, 平均 0.008s, P50 0.007s, P95 0.018s, P99 0.025s, 最大 0.046s
- 代理获取: 28次, 累计 2.097s, 平均 0.075s, P50 0.000s, P95 0.000s, P99 0.578s, 最大 1.519s
- 分页随机等待: 28次, 累计 37.951s, 平均 1.355s, P50 1.451s, P95 1.944s, P99 1.957s, 最大 1.982s
- 响应JSON解析: 27次, 累计 0.043s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.002s
- 响应读取: 27次, 累计 4.689s, 平均 0.174s, P50 0.026s, P95 0.105s, P99 0.172s, 最大 3.722s
- 批量写入: 22次, 累计 2.329s, 平均 0.106s, P50 0.106s, P95 0.115s, P99 0.115s, 最大 0.123s
- 批量去重查询: 26次, 累计 1.327s, 平均 0.051s, P50 0.052s, P95 0.056s, P99 0.056s, 最大 0.057s
- 藏宝阁HTTP请求: 28次, 累计 80.518s, 平均 2.876s, P50 1.497s, P95 8.614s, P99 9.890s, 最大 15.001s
最慢页面 Top 10:
- page=1, 总耗时=22.301s, 获取=21.828s, 处理=0.473s
- page=17, 总耗时=19.757s, 获取=19.612s, 处理=0.145s
- page=4, 总耗时=10.788s, 获取=10.394s, 处理=0.395s
- page=15, 总耗时=6.746s, 获取=6.392s, 处理=0.354s
- page=11, 总耗时=6.450s, 获取=6.040s, 处理=0.410s
- page=10, 总耗时=6.288s, 获取=5.911s, 处理=0.377s
- page=12, 总耗时=5.743s, 获取=5.423s, 处理=0.320s
- page=7, 总耗时=5.561s, 获取=5.142s, 处理=0.420s
- page=6, 总耗时=5.053s, 获取=4.883s, 处理=0.170s
- page=13, 总耗时=5.031s, 获取=4.429s, 处理=0.603s
==================================================