Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 146.258s
停止原因: checkpoint
账号: x929038365@163.com (ID=19), 代理ID: 31
页面: 尝试 28 / 成功 28 / 失败 0
数据: 处理 409 / 新增 224 / 重复 185 / 时间过滤 0 / 归档 155
Mailbox: 成功 101 / 失败 224
吞吐量: 2.80 items/s, 0.19 pages/s
异常: 请求 1 / 解析 0 / 状态异常 5 / 密保 4 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.881s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.107s
- 分页抓取: 142.319s
- 历史归档: 0.234s
- 保存Checkpoint: 0.105s
- 保存运行统计: 0.176s
- 发送通知与更新资源统计: 2.435s
调用统计:
- Mailbox写入: 325次, 累计 4.309s, 平均 0.013s, P50 0.011s, P95 0.027s, P99 0.040s, 最大 0.095s
- 代理获取: 34次, 累计 7.325s, 平均 0.215s, P50 0.000s, P95 1.406s, P99 1.407s, 最大 1.450s
- 分页随机等待: 34次, 累计 41.481s, 平均 1.220s, P50 1.044s, P95 1.928s, P99 1.980s, 最大 1.994s
- 响应JSON解析: 33次, 累计 0.049s, 平均 0.001s, P50 0.002s, P95 0.002s, P99 0.003s, 最大 0.004s
- 响应读取: 33次, 累计 0.960s, 平均 0.029s, P50 0.013s, P95 0.051s, P99 0.086s, 最大 0.396s
- 批量写入: 24次, 累计 1.960s, 平均 0.082s, P50 0.080s, P95 0.085s, P99 0.096s, 最大 0.102s
- 批量去重查询: 28次, 累计 0.809s, 平均 0.029s, P50 0.027s, P95 0.031s, P99 0.038s, 最大 0.061s
- 藏宝阁HTTP请求: 34次, 累计 50.502s, 平均 1.485s, P50 0.793s, P95 1.528s, P99 9.220s, 最大 15.001s
最慢页面 Top 10:
- page=3, 总耗时=21.372s, 获取=20.887s, 处理=0.485s
- page=4, 总耗时=20.579s, 获取=20.043s, 处理=0.536s
- page=11, 总耗时=15.945s, 获取=15.659s, 处理=0.287s
- page=1, 总耗时=15.806s, 获取=14.765s, 处理=1.041s
- page=18, 总耗时=10.679s, 获取=10.234s, 处理=0.445s
- page=5, 总耗时=3.974s, 获取=3.540s, 处理=0.434s
- page=8, 总耗时=3.585s, 获取=3.254s, 处理=0.331s
- page=21, 总耗时=3.162s, 获取=2.659s, 处理=0.503s
- page=16, 总耗时=3.154s, 获取=2.468s, 处理=0.686s
- page=7, 总耗时=3.127s, 获取=2.626s, 处理=0.501s
==================================================