Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 115.222s
停止原因: checkpoint
账号: n039174@163.com (ID=198), 代理ID: 28
页面: 尝试 24 / 成功 24 / 失败 0
数据: 处理 353 / 新增 236 / 重复 117 / 时间过滤 0 / 归档 246
Mailbox: 成功 86 / 失败 236
吞吐量: 3.06 items/s, 0.21 pages/s
异常: 请求 1 / 解析 0 / 状态异常 5 / 密保 4 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.786s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.101s
- 分页抓取: 111.851s
- 历史归档: 0.292s
- 保存Checkpoint: 0.097s
- 保存运行统计: 0.151s
- 发送通知与更新资源统计: 1.943s
调用统计:
- Mailbox写入: 322次, 累计 2.776s, 平均 0.009s, P50 0.008s, P95 0.018s, P99 0.025s, 最大 0.040s
- 代理获取: 30次, 累计 4.139s, 平均 0.138s, P50 0.000s, P95 0.493s, P99 0.497s, 最大 2.122s
- 分页随机等待: 30次, 累计 38.226s, 平均 1.274s, P50 1.271s, P95 1.919s, P99 1.964s, 最大 1.990s
- 响应JSON解析: 29次, 累计 0.045s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.004s
- 响应读取: 29次, 累计 2.430s, 平均 0.084s, P50 0.002s, P95 0.079s, P99 0.305s, 最大 1.856s
- 批量写入: 24次, 累计 1.705s, 平均 0.071s, P50 0.070s, P95 0.073s, P99 0.074s, 最大 0.075s
- 批量去重查询: 24次, 累计 0.572s, 平均 0.024s, P50 0.023s, P95 0.025s, P99 0.027s, 最大 0.029s
- 藏宝阁HTTP请求: 30次, 累计 44.985s, 平均 1.500s, P50 0.542s, P95 2.333s, P99 10.866s, 最大 15.003s
最慢页面 Top 10:
- page=1, 总耗时=27.761s, 获取=27.330s, 处理=0.431s
- page=6, 总耗时=14.362s, 获取=14.108s, 处理=0.254s
- page=2, 总耗时=12.905s, 获取=12.576s, 处理=0.329s
- page=8, 总耗时=10.893s, 获取=10.697s, 处理=0.196s
- page=10, 总耗时=3.288s, 获取=2.897s, 处理=0.390s
- page=14, 总耗时=3.172s, 获取=2.786s, 处理=0.386s
- page=5, 总耗时=2.673s, 获取=2.330s, 处理=0.343s
- page=18, 总耗时=2.623s, 获取=2.324s, 处理=0.299s
- page=20, 总耗时=2.536s, 获取=2.144s, 处理=0.392s
- page=19, 总耗时=2.421s, 获取=2.158s, 处理=0.263s
==================================================