Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 64.283s
停止原因: checkpoint
账号: p453319@163.com (ID=147), 代理ID: 31
页面: 尝试 21 / 成功 21 / 失败 0
数据: 处理 309 / 新增 208 / 重复 101 / 时间过滤 0 / 归档 218
Mailbox: 成功 76 / 失败 208
吞吐量: 4.81 items/s, 0.33 pages/s
异常: 请求 0 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.800s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.098s
- 分页抓取: 61.176s
- 历史归档: 0.260s
- 保存Checkpoint: 0.090s
- 保存运行统计: 0.145s
- 发送通知与更新资源统计: 1.712s
调用统计:
- Mailbox写入: 284次, 累计 2.520s, 平均 0.009s, P50 0.007s, P95 0.018s, P99 0.025s, 最大 0.049s
- 代理获取: 22次, 累计 0.908s, 平均 0.041s, P50 0.000s, P95 0.000s, P99 0.000s, 最大 0.908s
- 分页随机等待: 22次, 累计 26.768s, 平均 1.217s, P50 1.132s, P95 1.816s, P99 1.836s, 最大 1.905s
- 响应JSON解析: 22次, 累计 0.035s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.003s
- 响应读取: 22次, 累计 1.615s, 平均 0.073s, P50 0.041s, P95 0.173s, P99 0.180s, 最大 0.237s
- 批量写入: 20次, 累计 1.387s, 平均 0.069s, P50 0.068s, P95 0.073s, P99 0.073s, 最大 0.075s
- 批量去重查询: 21次, 累计 0.490s, 平均 0.023s, P50 0.023s, P95 0.027s, P99 0.027s, 最大 0.028s
- 藏宝阁HTTP请求: 22次, 累计 21.521s, 平均 0.978s, P50 0.939s, P95 1.258s, P99 1.267s, 最大 1.346s
最慢页面 Top 10:
- page=1, 总耗时=8.010s, 获取=7.581s, 处理=0.429s
- page=14, 总耗时=3.567s, 获取=3.146s, 处理=0.421s
- page=20, 总耗时=3.355s, 获取=2.962s, 处理=0.393s
- page=4, 总耗时=3.208s, 获取=2.776s, 处理=0.432s
- page=2, 总耗时=3.098s, 获取=2.669s, 处理=0.429s
- page=16, 总耗时=3.030s, 获取=2.677s, 处理=0.354s
- page=12, 总耗时=2.854s, 获取=2.537s, 处理=0.317s
- page=9, 总耗时=2.843s, 获取=2.568s, 处理=0.276s
- page=3, 总耗时=2.752s, 获取=2.420s, 处理=0.332s
- page=19, 总耗时=2.738s, 获取=2.445s, 处理=0.293s
==================================================