Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 86.327s
停止原因: checkpoint
账号: hggyfn9@163.com (ID=81), 代理ID: 29
页面: 尝试 25 / 成功 25 / 失败 0
数据: 处理 373 / 新增 225 / 重复 148 / 时间过滤 0 / 归档 187
Mailbox: 成功 75 / 失败 225
吞吐量: 4.32 items/s, 0.29 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.787s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.102s
- 分页抓取: 83.886s
- 历史归档: 0.224s
- 保存Checkpoint: 0.090s
- 保存运行统计: 0.146s
- 发送通知与更新资源统计: 1.091s
调用统计:
- Mailbox写入: 300次, 累计 3.267s, 平均 0.011s, P50 0.009s, P95 0.023s, P99 0.035s, 最大 0.083s
- 代理获取: 27次, 累计 1.882s, 平均 0.070s, P50 0.000s, P95 0.000s, P99 0.753s, 最大 1.129s
- 分页随机等待: 27次, 累计 32.126s, 平均 1.190s, P50 1.084s, P95 1.808s, P99 1.932s, 最大 1.959s
- 响应JSON解析: 26次, 累计 0.042s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.003s
- 响应读取: 26次, 累计 0.263s, 平均 0.010s, P50 0.005s, P95 0.035s, P99 0.037s, 最大 0.038s
- 批量写入: 22次, 累计 1.518s, 平均 0.069s, P50 0.068s, P95 0.072s, P99 0.074s, 最大 0.077s
- 批量去重查询: 25次, 累计 0.575s, 平均 0.023s, P50 0.023s, P95 0.024s, P99 0.024s, 最大 0.029s
- 藏宝阁HTTP请求: 27次, 累计 35.733s, 平均 1.323s, P50 0.472s, P95 2.566s, P99 3.986s, 最大 15.004s
最慢页面 Top 10:
- page=1, 总耗时=26.036s, 获取=25.453s, 处理=0.583s
- page=18, 总耗时=6.458s, 获取=5.951s, 处理=0.506s
- page=17, 总耗时=4.406s, 获取=3.978s, 处理=0.428s
- page=20, 总耗时=3.387s, 获取=2.793s, 处理=0.594s
- page=13, 总耗时=3.306s, 获取=3.059s, 处理=0.247s
- page=5, 总耗时=2.616s, 获取=2.158s, 处理=0.458s
- page=9, 总耗时=2.508s, 获取=2.252s, 处理=0.256s
- page=2, 总耗时=2.500s, 获取=1.983s, 处理=0.517s
- page=16, 总耗时=2.487s, 获取=2.015s, 处理=0.472s
- page=12, 总耗时=2.422s, 获取=2.054s, 处理=0.367s
==================================================