Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 74.430s
停止原因: checkpoint
账号: yidh8007@163.com (ID=105), 代理ID: 19
页面: 尝试 21 / 成功 21 / 失败 0
数据: 处理 301 / 新增 172 / 重复 129 / 时间过滤 0 / 归档 135
Mailbox: 成功 60 / 失败 172
吞吐量: 4.04 items/s, 0.28 pages/s
异常: 请求 0 / 解析 0 / 状态异常 2 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.817s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.104s
- 分页抓取: 71.709s
- 历史归档: 0.227s
- 保存Checkpoint: 0.107s
- 保存运行统计: 0.174s
- 发送通知与更新资源统计: 1.290s
调用统计:
- Mailbox写入: 232次, 累计 2.312s, 平均 0.010s, P50 0.008s, P95 0.022s, P99 0.026s, 最大 0.027s
- 代理获取: 23次, 累计 0.923s, 平均 0.040s, P50 0.000s, P95 0.000s, P99 0.000s, 最大 0.923s
- 分页随机等待: 23次, 累计 28.918s, 平均 1.257s, P50 1.141s, P95 1.870s, P99 1.914s, 最大 1.916s
- 响应JSON解析: 23次, 累计 0.037s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.003s, 最大 0.003s
- 响应读取: 23次, 累计 1.223s, 平均 0.053s, P50 0.024s, P95 0.181s, P99 0.302s, 最大 0.325s
- 批量写入: 18次, 累计 1.396s, 平均 0.078s, P50 0.079s, P95 0.082s, P99 0.082s, 最大 0.083s
- 批量去重查询: 21次, 累计 0.556s, 平均 0.026s, P50 0.027s, P95 0.029s, P99 0.029s, 最大 0.029s
- 藏宝阁HTTP请求: 23次, 累计 20.666s, 平均 0.899s, P50 0.799s, P95 1.599s, P99 1.703s, 最大 1.934s
最慢页面 Top 10:
- page=4, 总耗时=10.725s, 获取=10.386s, 处理=0.339s
- page=8, 总耗时=9.753s, 获取=9.429s, 处理=0.325s
- page=1, 总耗时=4.775s, 获取=4.313s, 处理=0.462s
- page=16, 总耗时=3.957s, 获取=3.565s, 处理=0.392s
- page=10, 总耗时=3.167s, 获取=2.695s, 处理=0.473s
- page=9, 总耗时=3.050s, 获取=2.906s, 处理=0.144s
- page=19, 总耗时=2.990s, 获取=2.592s, 处理=0.399s
- page=2, 总耗时=2.951s, 获取=2.543s, 处理=0.408s
- page=7, 总耗时=2.917s, 获取=2.407s, 处理=0.510s
- page=5, 总耗时=2.853s, 获取=2.561s, 处理=0.292s
==================================================