Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 65.013s
停止原因: checkpoint
账号: ksjob047@163.com (ID=75), 代理ID: 10
页面: 尝试 16 / 成功 16 / 失败 0
数据: 处理 228 / 新增 150 / 重复 78 / 时间过滤 0 / 归档 185
Mailbox: 成功 64 / 失败 150
吞吐量: 3.51 items/s, 0.25 pages/s
异常: 请求 3 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.381s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.202s
- 分页抓取: 61.041s
- 历史归档: 0.318s
- 保存Checkpoint: 0.156s
- 保存运行统计: 0.216s
- 发送通知与更新资源统计: 1.698s
调用统计:
- Mailbox写入: 214次, 累计 2.148s, 平均 0.010s, P50 0.007s, P95 0.024s, P99 0.037s, 最大 0.052s
- 代理获取: 19次, 累计 2.945s, 平均 0.155s, P50 0.000s, P95 0.746s, P99 0.746s, 最大 0.766s
- 分页随机等待: 19次, 累计 23.088s, 平均 1.215s, P50 1.163s, P95 1.876s, P99 1.876s, 最大 1.976s
- 响应JSON解析: 16次, 累计 0.030s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 16次, 累计 0.159s, 平均 0.010s, P50 0.004s, P95 0.020s, P99 0.020s, 最大 0.053s
- 批量写入: 15次, 累计 1.560s, 平均 0.104s, P50 0.104s, P95 0.108s, P99 0.108s, 最大 0.108s
- 批量去重查询: 16次, 累计 0.807s, 平均 0.050s, P50 0.050s, P95 0.052s, P99 0.052s, 最大 0.054s
- 藏宝阁HTTP请求: 19次, 累计 27.693s, 平均 1.458s, P50 0.667s, P95 4.806s, P99 4.806s, 最大 12.552s
最慢页面 Top 10:
- page=7, 总耗时=17.536s, 获取=17.230s, 处理=0.306s
- page=1, 总耗时=12.114s, 获取=11.161s, 处理=0.953s
- page=8, 总耗时=3.017s, 获取=2.577s, 处理=0.440s
- page=3, 总耗时=2.893s, 获取=2.443s, 处理=0.450s
- page=2, 总耗时=2.621s, 获取=2.175s, 处理=0.447s
- page=4, 总耗时=2.562s, 获取=2.106s, 处理=0.457s
- page=6, 总耗时=2.374s, 获取=1.942s, 处理=0.432s
- page=15, 总耗时=2.263s, 获取=1.877s, 处理=0.386s
- page=10, 总耗时=2.217s, 获取=1.732s, 处理=0.485s
- page=9, 总耗时=2.183s, 获取=1.713s, 处理=0.470s
==================================================