Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 78.632s
停止原因: checkpoint
账号: yan8190021@163.com (ID=44), 代理ID: 29
页面: 尝试 18 / 成功 18 / 失败 0
数据: 处理 264 / 新增 171 / 重复 93 / 时间过滤 0 / 归档 176
Mailbox: 成功 82 / 失败 171
吞吐量: 3.36 items/s, 0.23 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.634s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.213s
- 分页抓取: 73.075s
- 历史归档: 0.295s
- 保存Checkpoint: 0.135s
- 保存运行统计: 0.203s
- 发送通知与更新资源统计: 3.076s
调用统计:
- Mailbox写入: 253次, 累计 2.751s, 平均 0.011s, P50 0.009s, P95 0.023s, P99 0.036s, 最大 0.048s
- 代理获取: 20次, 累计 1.615s, 平均 0.081s, P50 0.000s, P95 0.685s, P99 0.685s, 最大 0.930s
- 分页随机等待: 20次, 累计 26.601s, 平均 1.330s, P50 1.271s, P95 1.928s, P99 1.928s, 最大 1.973s
- 响应JSON解析: 19次, 累计 0.033s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 20次, 累计 15.732s, 平均 0.787s, P50 0.003s, P95 1.159s, P99 1.159s, 最大 14.348s
- 批量写入: 18次, 累计 1.670s, 平均 0.093s, P50 0.091s, P95 0.097s, P99 0.097s, 最大 0.102s
- 批量去重查询: 18次, 累计 0.905s, 平均 0.050s, P50 0.044s, P95 0.051s, P99 0.051s, 最大 0.152s
- 藏宝阁HTTP请求: 20次, 累计 17.802s, 平均 0.890s, P50 0.649s, P95 1.961s, P99 1.961s, 最大 4.198s
最慢页面 Top 10:
- page=16, 总耗时=24.051s, 获取=23.773s, 处理=0.278s
- page=1, 总耗时=8.259s, 获取=7.530s, 处理=0.729s
- page=17, 总耗时=4.011s, 获取=3.653s, 处理=0.358s
- page=9, 总耗时=3.076s, 获取=2.666s, 处理=0.410s
- page=4, 总耗时=2.958s, 获取=2.646s, 处理=0.312s
- page=14, 总耗时=2.886s, 获取=2.488s, 处理=0.398s
- page=10, 总耗时=2.733s, 获取=2.317s, 处理=0.416s
- page=12, 总耗时=2.568s, 获取=2.225s, 处理=0.342s
- page=7, 总耗时=2.556s, 获取=2.069s, 处理=0.487s
- page=2, 总耗时=2.498s, 获取=1.867s, 处理=0.631s
==================================================