Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 94.440s
停止原因: checkpoint
账号: efhog0@163.com (ID=237), 代理ID: 27
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 279 / 新增 178 / 重复 101 / 时间过滤 0 / 归档 79
Mailbox: 成功 61 / 失败 178
吞吐量: 2.95 items/s, 0.20 pages/s
异常: 请求 1 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.749s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.091s
- 分页抓取: 82.292s
- 历史归档: 0.176s
- 保存Checkpoint: 0.090s
- 保存运行统计: 0.143s
- 发送通知与更新资源统计: 10.898s
调用统计:
- Mailbox写入: 239次, 累计 1.857s, 平均 0.008s, P50 0.007s, P95 0.015s, P99 0.018s, 最大 0.024s
- 代理获取: 22次, 累计 1.596s, 平均 0.073s, P50 0.000s, P95 0.474s, P99 0.516s, 最大 0.605s
- 分页随机等待: 22次, 累计 28.591s, 平均 1.300s, P50 1.282s, P95 1.783s, P99 1.885s, 最大 1.980s
- 响应JSON解析: 21次, 累计 0.036s, 平均 0.002s, P50 0.002s, P95 0.004s, P99 0.004s, 最大 0.004s
- 响应读取: 22次, 累计 16.953s, 平均 0.771s, P50 0.018s, P95 0.078s, P99 2.158s, 最大 14.387s
- 批量写入: 17次, 累计 1.120s, 平均 0.066s, P50 0.066s, P95 0.067s, P99 0.067s, 最大 0.069s
- 批量去重查询: 19次, 累计 0.415s, 平均 0.022s, P50 0.022s, P95 0.022s, P99 0.022s, 最大 0.024s
- 藏宝阁HTTP请求: 22次, 累计 21.489s, 平均 0.977s, P50 0.728s, P95 1.062s, P99 1.173s, 最大 4.783s
最慢页面 Top 10:
- page=1, 总耗时=31.486s, 获取=31.148s, 处理=0.338s
- page=4, 总耗时=9.070s, 获取=8.718s, 处理=0.351s
- page=15, 总耗时=3.072s, 获取=2.680s, 处理=0.392s
- page=11, 总耗时=2.988s, 获取=2.680s, 处理=0.307s
- page=13, 总耗时=2.846s, 获取=2.586s, 处理=0.260s
- page=6, 总耗时=2.797s, 获取=2.510s, 处理=0.287s
- page=19, 总耗时=2.791s, 获取=2.688s, 处理=0.103s
- page=12, 总耗时=2.725s, 获取=2.370s, 处理=0.354s
- page=9, 总耗时=2.724s, 获取=2.458s, 处理=0.266s
- page=3, 总耗时=2.572s, 获取=2.307s, 处理=0.265s
==================================================