Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 126.737s
停止原因: checkpoint
账号: gw60218@163.com (ID=3), 代理ID: 9
页面: 尝试 23 / 成功 23 / 失败 0
数据: 处理 334 / 新增 196 / 重复 138 / 时间过滤 0 / 归档 242
Mailbox: 成功 89 / 失败 196
吞吐量: 2.64 items/s, 0.18 pages/s
异常: 请求 1 / 解析 0 / 状态异常 7 / 密保 4 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.870s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.113s
- 分页抓取: 123.338s
- 历史归档: 0.283s
- 保存Checkpoint: 0.106s
- 保存运行统计: 0.167s
- 发送通知与更新资源统计: 1.858s
调用统计:
- Mailbox写入: 285次, 累计 2.842s, 平均 0.010s, P50 0.008s, P95 0.020s, P99 0.028s, 最大 0.105s
- 代理获取: 31次, 累计 7.364s, 平均 0.238s, P50 0.000s, P95 1.392s, P99 1.402s, 最大 1.424s
- 分页随机等待: 31次, 累计 43.037s, 平均 1.388s, P50 1.362s, P95 1.980s, P99 1.986s, 最大 1.987s
- 响应JSON解析: 30次, 累计 0.037s, 平均 0.001s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.002s
- 响应读取: 30次, 累计 0.587s, 平均 0.020s, P50 0.003s, P95 0.068s, P99 0.072s, 最大 0.140s
- 批量写入: 21次, 累计 1.679s, 平均 0.080s, P50 0.079s, P95 0.083s, P99 0.083s, 最大 0.090s
- 批量去重查询: 23次, 累计 0.633s, 平均 0.028s, P50 0.026s, P95 0.030s, P99 0.031s, 最大 0.037s
- 藏宝阁HTTP请求: 31次, 累计 27.671s, 平均 0.893s, P50 0.794s, P95 1.474s, P99 1.774s, 最大 2.459s
最慢页面 Top 10:
- page=3, 总耗时=18.694s, 获取=18.306s, 处理=0.388s
- page=2, 总耗时=10.454s, 获取=10.081s, 处理=0.374s
- page=12, 总耗时=10.368s, 获取=10.173s, 处理=0.196s
- page=19, 总耗时=10.361s, 获取=10.081s, 处理=0.280s
- page=5, 总耗时=10.254s, 获取=9.867s, 处理=0.387s
- page=13, 总耗时=9.357s, 获取=8.958s, 处理=0.399s
- page=21, 总耗时=8.023s, 获取=7.662s, 处理=0.362s
- page=1, 总耗时=5.259s, 获取=4.715s, 处理=0.545s
- page=8, 总耗时=3.684s, 获取=3.269s, 处理=0.415s
- page=6, 总耗时=3.488s, 获取=3.321s, 处理=0.167s
==================================================