Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 114.031s
停止原因: checkpoint
账号: tjmjip1@163.com (ID=168), 代理ID: 46
页面: 尝试 22 / 成功 22 / 失败 0
数据: 处理 321 / 新增 168 / 重复 153 / 时间过滤 0 / 归档 204
Mailbox: 成功 56 / 失败 168
吞吐量: 2.82 items/s, 0.19 pages/s
异常: 请求 0 / 解析 0 / 状态异常 6 / 密保 2 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.858s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.113s
- 分页抓取: 109.526s
- 历史归档: 0.259s
- 保存Checkpoint: 0.101s
- 保存运行统计: 0.167s
- 发送通知与更新资源统计: 3.005s
调用统计:
- Mailbox写入: 224次, 累计 3.633s, 平均 0.016s, P50 0.014s, P95 0.032s, P99 0.043s, 最大 0.060s
- 代理获取: 28次, 累计 1.011s, 平均 0.036s, P50 0.000s, P95 0.308s, P99 0.310s, 最大 0.393s
- 分页随机等待: 28次, 累计 34.526s, 平均 1.233s, P50 1.233s, P95 1.888s, P99 1.899s, 最大 1.903s
- 响应JSON解析: 28次, 累计 0.037s, 平均 0.001s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.003s
- 响应读取: 28次, 累计 0.332s, 平均 0.012s, P50 0.002s, P95 0.034s, P99 0.059s, 最大 0.061s
- 批量写入: 20次, 累计 1.578s, 平均 0.079s, P50 0.078s, P95 0.083s, P99 0.083s, 最大 0.086s
- 批量去重查询: 22次, 累计 0.589s, 平均 0.027s, P50 0.026s, P95 0.028s, P99 0.030s, 最大 0.032s
- 藏宝阁HTTP请求: 28次, 累计 25.020s, 平均 0.894s, P50 0.581s, P95 1.787s, P99 1.816s, 最大 3.960s
最慢页面 Top 10:
- page=4, 总耗时=20.410s, 获取=20.040s, 处理=0.370s
- page=13, 总耗时=16.530s, 获取=16.121s, 处理=0.410s
- page=1, 总耗时=16.177s, 获取=15.427s, 处理=0.751s
- page=10, 总耗时=10.280s, 获取=9.735s, 处理=0.545s
- page=20, 总耗时=3.965s, 获取=3.592s, 处理=0.373s
- page=9, 总耗时=3.791s, 获取=3.051s, 处理=0.740s
- page=12, 总耗时=3.755s, 获取=3.190s, 处理=0.565s
- page=8, 总耗时=3.285s, 获取=2.353s, 处理=0.932s
- page=7, 总耗时=2.970s, 获取=2.198s, 处理=0.772s
- page=3, 总耗时=2.847s, 获取=2.361s, 处理=0.486s
==================================================