Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 43.108s
停止原因: checkpoint
账号: ksjob047@163.com (ID=75), 代理ID: 58
页面: 尝试 13 / 成功 13 / 失败 0
数据: 处理 186 / 新增 135 / 重复 51 / 时间过滤 0 / 归档 116
Mailbox: 成功 75 / 失败 135
吞吐量: 4.31 items/s, 0.30 pages/s
异常: 请求 0 / 解析 0 / 状态异常 1 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.471s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.216s
- 分页抓取: 35.187s
- 历史归档: 0.263s
- 保存Checkpoint: 0.160s
- 保存运行统计: 0.226s
- 发送通知与更新资源统计: 5.583s
调用统计:
- Mailbox写入: 210次, 累计 2.103s, 平均 0.010s, P50 0.008s, P95 0.022s, P99 0.029s, 最大 0.039s
- 代理获取: 14次, 累计 2.583s, 平均 0.184s, P50 0.000s, P95 0.862s, P99 0.862s, 最大 1.721s
- 分页随机等待: 14次, 累计 14.082s, 平均 1.006s, P50 0.903s, P95 1.581s, P99 1.581s, 最大 1.695s
- 响应JSON解析: 14次, 累计 0.023s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.003s
- 响应读取: 14次, 累计 0.066s, 平均 0.005s, P50 0.002s, P95 0.004s, P99 0.004s, 最大 0.038s
- 批量写入: 12次, 累计 1.306s, 平均 0.109s, P50 0.108s, P95 0.111s, P99 0.111s, 最大 0.113s
- 批量去重查询: 13次, 累计 0.687s, 平均 0.053s, P50 0.053s, P95 0.055s, P99 0.055s, 最大 0.057s
- 藏宝阁HTTP请求: 14次, 累计 9.929s, 平均 0.709s, P50 0.576s, P95 1.200s, P99 1.200s, 最大 1.280s
最慢页面 Top 10:
- page=1, 总耗时=9.751s, 获取=9.104s, 处理=0.647s
- page=10, 总耗时=2.581s, 获取=2.122s, 处理=0.459s
- page=7, 总耗时=2.581s, 获取=2.170s, 处理=0.411s
- page=11, 总耗时=2.548s, 获取=2.258s, 处理=0.290s
- page=3, 总耗时=2.325s, 获取=1.808s, 处理=0.517s
- page=12, 总耗时=2.315s, 获取=1.917s, 处理=0.398s
- page=5, 总耗时=2.197s, 获取=1.706s, 处理=0.492s
- page=9, 总耗时=2.057s, 获取=1.546s, 处理=0.511s
- page=8, 总耗时=1.962s, 获取=1.437s, 处理=0.525s
- page=2, 总耗时=1.950s, 获取=1.459s, 处理=0.491s
==================================================