Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 86.858s
停止原因: checkpoint
账号: shi354611@163.com (ID=49), 代理ID: 61
页面: 尝试 21 / 成功 21 / 失败 0
数据: 处理 303 / 新增 166 / 重复 137 / 时间过滤 0 / 归档 210
Mailbox: 成功 80 / 失败 166
吞吐量: 3.49 items/s, 0.24 pages/s
异常: 请求 1 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.496s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.230s
- 分页抓取: 81.975s
- 历史归档: 0.349s
- 保存Checkpoint: 0.160s
- 保存运行统计: 0.224s
- 发送通知与更新资源统计: 2.422s
调用统计:
- Mailbox写入: 246次, 累计 2.542s, 平均 0.010s, P50 0.008s, P95 0.021s, P99 0.032s, 最大 0.047s
- 代理获取: 22次, 累计 4.260s, 平均 0.194s, P50 0.000s, P95 0.000s, P99 1.021s, 最大 3.239s
- 分页随机等待: 22次, 累计 28.020s, 平均 1.274s, P50 1.173s, P95 1.919s, P99 1.951s, 最大 1.953s
- 响应JSON解析: 21次, 累计 0.037s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 21次, 累计 1.473s, 平均 0.070s, P50 0.033s, P95 0.332s, P99 0.332s, 最大 0.402s
- 批量写入: 20次, 累计 2.184s, 平均 0.109s, P50 0.108s, P95 0.117s, P99 0.117s, 最大 0.124s
- 批量去重查询: 21次, 累计 1.147s, 平均 0.055s, P50 0.052s, P95 0.068s, P99 0.068s, 最大 0.078s
- 藏宝阁HTTP请求: 22次, 累计 39.148s, 平均 1.779s, P50 1.049s, P95 4.261s, P99 4.390s, 最大 4.450s
最慢页面 Top 10:
- page=17, 总耗时=11.011s, 获取=10.548s, 处理=0.463s
- page=5, 总耗时=6.075s, 获取=5.621s, 处理=0.453s
- page=8, 总耗时=5.574s, 获取=5.238s, 处理=0.336s
- page=6, 总耗时=5.418s, 获取=5.059s, 处理=0.360s
- page=10, 总耗时=5.072s, 获取=4.763s, 处理=0.309s
- page=16, 总耗时=5.001s, 获取=4.626s, 处理=0.376s
- page=15, 总耗时=4.589s, 获取=4.108s, 处理=0.481s
- page=11, 总耗时=4.361s, 获取=3.970s, 处理=0.390s
- page=7, 总耗时=4.126s, 获取=3.603s, 处理=0.523s
- page=9, 总耗时=3.467s, 获取=2.938s, 处理=0.529s
==================================================