Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 166.377s
停止原因: skip_limit
账号: dq402044@163.com (ID=134), 代理ID: 16
页面: 尝试 20 / 成功 20 / 失败 0
数据: 处理 296 / 新增 96 / 重复 200 / 时间过滤 0 / 归档 182
Mailbox: 成功 34 / 失败 96
吞吐量: 1.78 items/s, 0.12 pages/s
异常: 请求 3 / 解析 0 / 状态异常 1 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.793s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.101s
- 分页抓取: 152.338s
- 历史归档: 0.237s
- 保存Checkpoint: 0.096s
- 保存运行统计: 0.150s
- 发送通知与更新资源统计: 12.661s
调用统计:
- Mailbox写入: 130次, 累计 1.871s, 平均 0.014s, P50 0.010s, P95 0.038s, P99 0.044s, 最大 0.064s
- 代理获取: 24次, 累计 5.449s, 平均 0.227s, P50 0.000s, P95 0.423s, P99 1.923s, 最大 2.372s
- 分页随机等待: 24次, 累计 29.788s, 平均 1.241s, P50 1.407s, P95 1.915s, P99 1.938s, 最大 1.970s
- 响应JSON解析: 21次, 累计 0.033s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.002s
- 响应读取: 21次, 累计 3.085s, 平均 0.147s, P50 0.039s, P95 0.374s, P99 0.374s, 最大 0.943s
- 批量写入: 14次, 累计 0.999s, 平均 0.071s, P50 0.071s, P95 0.074s, P99 0.074s, 最大 0.077s
- 批量去重查询: 20次, 累计 0.497s, 平均 0.025s, P50 0.024s, P95 0.029s, P99 0.029s, 最大 0.031s
- 藏宝阁HTTP请求: 24次, 累计 101.990s, 平均 4.250s, P50 1.706s, P95 15.001s, P99 15.002s, 最大 15.002s
最慢页面 Top 10:
- page=16, 总耗时=37.166s, 获取=37.057s, 处理=0.109s
- page=3, 总耗时=24.472s, 获取=24.051s, 处理=0.421s
- page=9, 总耗时=15.233s, 获取=13.262s, 处理=1.971s
- page=15, 总耗时=7.493s, 获取=6.966s, 处理=0.528s
- page=13, 总耗时=7.419s, 获取=7.237s, 处理=0.182s
- page=11, 总耗时=7.176s, 获取=6.919s, 处理=0.257s
- page=10, 总耗时=5.964s, 获取=5.697s, 处理=0.267s
- page=6, 总耗时=5.732s, 获取=5.333s, 处理=0.399s
- page=7, 总耗时=5.711s, 获取=5.170s, 处理=0.541s
- page=8, 总耗时=5.159s, 获取=4.671s, 处理=0.488s
==================================================