Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 97.351s
停止原因: checkpoint
账号: aochengtao9961@163.com (ID=430), 代理ID: 53
页面: 尝试 21 / 成功 21 / 失败 0
数据: 处理 300 / 新增 147 / 重复 153 / 时间过滤 0 / 归档 151
Mailbox: 成功 63 / 失败 147
吞吐量: 3.08 items/s, 0.22 pages/s
异常: 请求 1 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.186s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.181s
- 分页抓取: 93.489s
- 历史归档: 0.289s
- 保存Checkpoint: 0.131s
- 保存运行统计: 0.187s
- 发送通知与更新资源统计: 1.888s
调用统计:
- Mailbox写入: 210次, 累计 2.755s, 平均 0.013s, P50 0.009s, P95 0.025s, P99 0.057s, 最大 0.372s
- 代理获取: 22次, 累计 1.755s, 平均 0.080s, P50 0.000s, P95 0.000s, P99 0.780s, 最大 0.976s
- 分页随机等待: 22次, 累计 28.889s, 平均 1.313s, P50 1.261s, P95 1.838s, P99 1.884s, 最大 1.944s
- 响应JSON解析: 21次, 累计 0.038s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 22次, 累计 9.479s, 平均 0.431s, P50 0.029s, P95 1.295s, P99 3.398s, 最大 3.815s
- 批量写入: 16次, 累计 1.490s, 平均 0.093s, P50 0.093s, P95 0.097s, P99 0.097s, 最大 0.097s
- 批量去重查询: 20次, 累计 0.899s, 平均 0.045s, P50 0.044s, P95 0.048s, P99 0.048s, 最大 0.049s
- 藏宝阁HTTP请求: 22次, 累计 44.108s, 平均 2.005s, P50 0.647s, P95 4.242s, P99 6.645s, 最大 11.186s
最慢页面 Top 10:
- page=8, 总耗时=20.457s, 获取=20.169s, 处理=0.288s
- page=3, 总耗时=8.222s, 获取=7.862s, 处理=0.359s
- page=1, 总耗时=7.978s, 获取=7.395s, 处理=0.583s
- page=5, 总耗时=7.877s, 获取=7.484s, 处理=0.393s
- page=2, 总耗时=7.397s, 获取=5.576s, 处理=1.821s
- page=7, 总耗时=5.857s, 获取=5.325s, 处理=0.532s
- page=6, 总耗时=3.542s, 获取=3.382s, 处理=0.161s
- page=11, 总耗时=3.139s, 获取=2.629s, 处理=0.510s
- page=4, 总耗时=2.798s, 获取=2.334s, 处理=0.464s
- page=17, 总耗时=2.667s, 获取=2.497s, 处理=0.170s
==================================================