Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 111.129s
停止原因: checkpoint
账号: dq402044@163.com (ID=134), 代理ID: 23
页面: 尝试 29 / 成功 29 / 失败 0
数据: 处理 421 / 新增 274 / 重复 147 / 时间过滤 0 / 归档 120
Mailbox: 成功 105 / 失败 274
吞吐量: 3.79 items/s, 0.26 pages/s
异常: 请求 1 / 解析 0 / 状态异常 5 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.738s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.091s
- 分页抓取: 108.826s
- 历史归档: 0.210s
- 保存Checkpoint: 0.092s
- 保存运行统计: 0.148s
- 发送通知与更新资源统计: 1.023s
调用统计:
- Mailbox写入: 379次, 累计 7.794s, 平均 0.021s, P50 0.014s, P95 0.058s, P99 0.102s, 最大 0.118s
- 代理获取: 35次, 累计 1.108s, 平均 0.032s, P50 0.000s, P95 0.353s, P99 0.365s, 最大 0.391s
- 分页随机等待: 35次, 累计 46.931s, 平均 1.341s, P50 1.322s, P95 1.956s, P99 1.968s, 最大 1.979s
- 响应JSON解析: 34次, 累计 0.050s, 平均 0.001s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 34次, 累计 0.449s, 平均 0.013s, P50 0.002s, P95 0.052s, P99 0.071s, 最大 0.075s
- 批量写入: 28次, 累计 1.947s, 平均 0.070s, P50 0.069s, P95 0.072s, P99 0.075s, 最大 0.078s
- 批量去重查询: 29次, 累计 0.712s, 平均 0.025s, P50 0.023s, P95 0.025s, P99 0.027s, 最大 0.070s
- 藏宝阁HTTP请求: 35次, 累计 26.336s, 平均 0.752s, P50 0.518s, P95 1.166s, P99 1.364s, 最大 5.542s
最慢页面 Top 10:
- page=9, 总耗时=12.334s, 获取=11.878s, 处理=0.457s
- page=5, 总耗时=10.326s, 获取=9.919s, 处理=0.407s
- page=1, 总耗时=8.489s, 获取=7.725s, 处理=0.765s
- page=13, 总耗时=7.883s, 获取=7.308s, 处理=0.575s
- page=7, 总耗时=7.688s, 获取=6.847s, 处理=0.841s
- page=6, 总耗时=3.527s, 获取=3.087s, 处理=0.441s
- page=21, 总耗时=3.459s, 获取=2.198s, 处理=1.260s
- page=17, 总耗时=3.397s, 获取=2.445s, 处理=0.952s
- page=22, 总耗时=3.134s, 获取=2.406s, 处理=0.728s
- page=16, 总耗时=3.110s, 获取=2.451s, 处理=0.659s
==================================================