Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 89.307s
停止原因: checkpoint
账号: dq402044@163.com (ID=134), 代理ID: 38
页面: 尝试 18 / 成功 18 / 失败 0
数据: 处理 263 / 新增 168 / 重复 95 / 时间过滤 0 / 归档 134
Mailbox: 成功 76 / 失败 168
吞吐量: 2.94 items/s, 0.20 pages/s
异常: 请求 1 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.747s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.247s
- 分页抓取: 84.778s
- 历史归档: 0.335s
- 保存Checkpoint: 0.183s
- 保存运行统计: 0.256s
- 发送通知与更新资源统计: 1.759s
调用统计:
- Mailbox写入: 244次, 累计 12.712s, 平均 0.052s, P50 0.016s, P95 0.222s, P99 0.615s, 最大 0.671s
- 代理获取: 19次, 累计 2.097s, 平均 0.110s, P50 0.000s, P95 1.005s, P99 1.005s, 最大 1.092s
- 分页随机等待: 19次, 累计 23.364s, 平均 1.230s, P50 1.262s, P95 1.860s, P99 1.860s, 最大 1.964s
- 响应JSON解析: 18次, 累计 0.035s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.005s
- 响应读取: 18次, 累计 7.094s, 平均 0.394s, P50 0.015s, P95 1.645s, P99 1.645s, 最大 2.857s
- 批量写入: 17次, 累计 2.087s, 平均 0.123s, P50 0.122s, P95 0.128s, P99 0.128s, 最大 0.129s
- 批量去重查询: 18次, 累计 1.097s, 平均 0.061s, P50 0.058s, P95 0.072s, P99 0.072s, 最大 0.078s
- 藏宝阁HTTP请求: 19次, 累计 16.566s, 平均 0.872s, P50 0.666s, P95 1.915s, P99 1.915s, 最大 2.080s
最慢页面 Top 10:
- page=5, 总耗时=13.629s, 获取=5.161s, 处理=8.468s
- page=9, 总耗时=10.913s, 获取=3.092s, 处理=7.821s
- page=3, 总耗时=9.752s, 获取=4.141s, 处理=5.610s
- page=1, 总耗时=7.449s, 获取=6.848s, 处理=0.601s
- page=11, 总耗时=5.091s, 获取=4.395s, 处理=0.696s
- page=2, 总耗时=4.209s, 获取=3.062s, 处理=1.147s
- page=8, 总耗时=3.761s, 获取=2.347s, 处理=1.414s
- page=14, 总耗时=3.637s, 获取=2.034s, 处理=1.604s
- page=7, 总耗时=3.141s, 获取=2.322s, 处理=0.820s
- page=4, 总耗时=3.115s, 获取=1.614s, 处理=1.502s
==================================================