Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 81.723s
停止原因: checkpoint
账号: ydntgt7803@163.com (ID=191), 代理ID: 60
页面: 尝试 22 / 成功 22 / 失败 0
数据: 处理 323 / 新增 192 / 重复 131 / 时间过滤 0 / 归档 212
Mailbox: 成功 102 / 失败 192
吞吐量: 3.95 items/s, 0.27 pages/s
异常: 请求 3 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.409s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.205s
- 分页抓取: 78.058s
- 历史归档: 0.372s
- 保存Checkpoint: 0.150s
- 保存运行统计: 0.230s
- 发送通知与更新资源统计: 1.296s
调用统计:
- Mailbox写入: 294次, 累计 10.134s, 平均 0.034s, P50 0.021s, P95 0.067s, P99 0.343s, 最大 1.005s
- 代理获取: 25次, 累计 3.222s, 平均 0.129s, P50 0.000s, P95 0.779s, P99 0.885s, 最大 0.898s
- 分页随机等待: 25次, 累计 28.514s, 平均 1.141s, P50 1.080s, P95 1.730s, P99 1.809s, 最大 1.826s
- 响应JSON解析: 22次, 累计 0.039s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.003s, 最大 0.003s
- 响应读取: 22次, 累计 0.361s, 平均 0.016s, P50 0.004s, P95 0.040s, P99 0.096s, 最大 0.120s
- 批量写入: 20次, 累计 2.066s, 平均 0.103s, P50 0.102s, P95 0.119s, P99 0.119s, 最大 0.123s
- 批量去重查询: 22次, 累计 1.113s, 平均 0.051s, P50 0.049s, P95 0.057s, P99 0.061s, 最大 0.067s
- 藏宝阁HTTP请求: 25次, 累计 18.718s, 平均 0.749s, P50 0.795s, P95 0.922s, P99 1.229s, 最大 1.276s
最慢页面 Top 10:
- page=10, 总耗时=9.346s, 获取=1.568s, 处理=7.778s
- page=1, 总耗时=7.435s, 获取=5.145s, 处理=2.290s
- page=19, 总耗时=6.166s, 获取=5.662s, 处理=0.503s
- page=9, 总耗时=3.916s, 获取=2.542s, 处理=1.374s
- page=12, 总耗时=3.684s, 获取=2.728s, 处理=0.955s
- page=20, 总耗时=3.411s, 获取=3.012s, 处理=0.399s
- page=11, 总耗时=3.322s, 获取=2.440s, 处理=0.883s
- page=14, 总耗时=3.227s, 获取=1.891s, 处理=1.336s
- page=18, 总耗时=3.210s, 获取=1.531s, 处理=1.679s
- page=6, 总耗时=3.165s, 获取=2.392s, 处理=0.774s
==================================================