Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 106.223s
停止原因: checkpoint
账号: nhb43079@163.com (ID=78), 代理ID: 16
页面: 尝试 23 / 成功 23 / 失败 0
数据: 处理 338 / 新增 216 / 重复 122 / 时间过滤 0 / 归档 250
Mailbox: 成功 112 / 失败 216
吞吐量: 3.18 items/s, 0.22 pages/s
异常: 请求 3 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.497s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.226s
- 分页抓取: 101.311s
- 历史归档: 0.389s
- 保存Checkpoint: 0.154s
- 保存运行统计: 0.215s
- 发送通知与更新资源统计: 2.430s
调用统计:
- Mailbox写入: 328次, 累计 9.527s, 平均 0.029s, P50 0.019s, P95 0.066s, P99 0.174s, 最大 0.442s
- 代理获取: 27次, 累计 5.136s, 平均 0.190s, P50 0.000s, P95 0.983s, P99 1.352s, 最大 1.875s
- 分页随机等待: 27次, 累计 35.580s, 平均 1.318s, P50 1.461s, P95 1.862s, P99 1.880s, 最大 1.955s
- 响应JSON解析: 24次, 累计 0.043s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.004s
- 响应读取: 24次, 累计 0.457s, 平均 0.019s, P50 0.019s, P95 0.029s, P99 0.031s, 最大 0.067s
- 批量写入: 21次, 累计 2.436s, 平均 0.116s, P50 0.109s, P95 0.138s, P99 0.138s, 最大 0.164s
- 批量去重查询: 23次, 累计 1.302s, 平均 0.057s, P50 0.056s, P95 0.065s, P99 0.067s, 最大 0.071s
- 藏宝阁HTTP请求: 27次, 累计 36.813s, 平均 1.363s, P50 0.579s, P95 1.574s, P99 6.660s, 最大 15.003s
最慢页面 Top 10:
- page=1, 总耗时=27.382s, 获取=24.713s, 处理=2.669s
- page=21, 总耗时=14.867s, 获取=14.383s, 处理=0.485s
- page=12, 总耗时=4.020s, 获取=2.544s, 处理=1.477s
- page=8, 总耗时=3.994s, 获取=2.517s, 处理=1.477s
- page=6, 总耗时=3.336s, 获取=2.389s, 处理=0.948s
- page=13, 总耗时=3.287s, 获取=2.382s, 处理=0.905s
- page=7, 总耗时=3.238s, 获取=2.501s, 处理=0.737s
- page=20, 总耗时=3.226s, 获取=3.039s, 处理=0.187s
- page=10, 总耗时=3.035s, 获取=2.126s, 处理=0.909s
- page=14, 总耗时=2.948s, 获取=2.276s, 处理=0.672s
==================================================