Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 54.196s
停止原因: checkpoint
账号: rg191158@163.com (ID=52), 代理ID: 50
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 278 / 新增 207 / 重复 71 / 时间过滤 0 / 归档 166
Mailbox: 成功 83 / 失败 207
吞吐量: 5.13 items/s, 0.35 pages/s
异常: 请求 0 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.711s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.083s
- 分页抓取: 50.814s
- 历史归档: 0.229s
- 保存Checkpoint: 0.097s
- 保存运行统计: 0.144s
- 发送通知与更新资源统计: 2.117s
调用统计:
- Mailbox写入: 290次, 累计 2.463s, 平均 0.008s, P50 0.007s, P95 0.017s, P99 0.023s, 最大 0.027s
- 代理获取: 20次, 累计 0.347s, 平均 0.017s, P50 0.000s, P95 0.000s, P99 0.000s, 最大 0.347s
- 分页随机等待: 20次, 累计 26.453s, 平均 1.323s, P50 1.513s, P95 1.899s, P99 1.899s, 最大 1.978s
- 响应JSON解析: 20次, 累计 0.035s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.004s
- 响应读取: 20次, 累计 0.676s, 平均 0.034s, P50 0.019s, P95 0.043s, P99 0.043s, 最大 0.295s
- 批量写入: 19次, 累计 1.215s, 平均 0.064s, P50 0.064s, P95 0.067s, P99 0.067s, 最大 0.069s
- 批量去重查询: 19次, 累计 0.419s, 平均 0.022s, P50 0.022s, P95 0.024s, P99 0.024s, 最大 0.026s
- 藏宝阁HTTP请求: 20次, 累计 13.395s, 平均 0.670s, P50 0.596s, P95 1.155s, P99 1.155s, 最大 1.713s
最慢页面 Top 10:
- page=1, 总耗时=7.597s, 获取=7.264s, 处理=0.333s
- page=16, 总耗时=3.296s, 获取=2.893s, 处理=0.403s
- page=9, 总耗时=3.259s, 获取=2.793s, 处理=0.466s
- page=14, 总耗时=2.983s, 获取=2.591s, 处理=0.392s
- page=18, 总耗时=2.830s, 获取=2.473s, 处理=0.357s
- page=19, 总耗时=2.823s, 获取=2.521s, 处理=0.302s
- page=2, 总耗时=2.759s, 获取=2.319s, 处理=0.440s
- page=3, 总耗时=2.642s, 获取=2.365s, 处理=0.277s
- page=13, 总耗时=2.595s, 获取=2.267s, 处理=0.329s
- page=8, 总耗时=2.587s, 获取=2.316s, 处理=0.271s
==================================================