Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 129.290s
停止原因: checkpoint
账号: fu81044422@163.com (ID=24), 代理ID: 11
页面: 尝试 26 / 成功 26 / 失败 0
数据: 处理 373 / 新增 189 / 重复 184 / 时间过滤 0 / 归档 156
Mailbox: 成功 95 / 失败 189
吞吐量: 2.88 items/s, 0.20 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.283s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.201s
- 分页抓取: 125.924s
- 历史归档: 0.271s
- 保存Checkpoint: 0.140s
- 保存运行统计: 0.199s
- 发送通知与更新资源统计: 1.270s
调用统计:
- Mailbox写入: 284次, 累计 7.441s, 平均 0.026s, P50 0.017s, P95 0.050s, P99 0.188s, 最大 0.636s
- 代理获取: 28次, 累计 2.084s, 平均 0.074s, P50 0.000s, P95 0.000s, P99 0.844s, 最大 1.241s
- 分页随机等待: 28次, 累计 36.896s, 平均 1.318s, P50 1.421s, P95 1.925s, P99 1.933s, 最大 1.959s
- 响应JSON解析: 27次, 累计 0.051s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.004s
- 响应读取: 27次, 累计 11.930s, 平均 0.442s, P50 0.005s, P95 0.986s, P99 1.382s, 最大 8.557s
- 批量写入: 23次, 累计 2.930s, 平均 0.127s, P50 0.101s, P95 0.124s, P99 0.143s, 最大 0.656s
- 批量去重查询: 25次, 累计 1.224s, 平均 0.049s, P50 0.049s, P95 0.055s, P99 0.055s, 最大 0.056s
- 藏宝阁HTTP请求: 28次, 累计 51.769s, 平均 1.849s, P50 0.736s, P95 5.967s, P99 6.105s, 最大 11.903s
最慢页面 Top 10:
- page=3, 总耗时=15.700s, 获取=15.228s, 处理=0.471s
- page=4, 总耗时=14.785s, 获取=14.312s, 处理=0.473s
- page=1, 总耗时=9.897s, 获取=9.310s, 处理=0.587s
- page=2, 总耗时=9.250s, 获取=8.652s, 处理=0.598s
- page=6, 总耗时=7.410s, 获取=6.998s, 处理=0.412s
- page=5, 总耗时=6.365s, 获取=5.837s, 处理=0.528s
- page=7, 总耗时=5.071s, 获取=4.685s, 处理=0.386s
- page=22, 总耗时=4.108s, 获取=2.623s, 处理=1.485s
- page=19, 总耗时=3.796s, 获取=2.445s, 处理=1.352s
- page=13, 总耗时=3.732s, 获取=2.458s, 处理=1.274s
==================================================