Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 153.233s
停止原因: skip_limit
账号: rbvv20144@163.com (ID=57), 代理ID: 38
页面: 尝试 26 / 成功 26 / 失败 0
数据: 处理 385 / 新增 185 / 重复 200 / 时间过滤 0 / 归档 220
Mailbox: 成功 58 / 失败 185
吞吐量: 2.51 items/s, 0.17 pages/s
异常: 请求 1 / 解析 0 / 状态异常 11 / 密保 4 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.774s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.100s
- 分页抓取: 150.664s
- 历史归档: 0.250s
- 保存Checkpoint: 0.091s
- 保存运行统计: 0.145s
- 发送通知与更新资源统计: 1.207s
调用统计:
- Mailbox写入: 243次, 累计 2.432s, 平均 0.010s, P50 0.007s, P95 0.021s, P99 0.036s, 最大 0.048s
- 代理获取: 38次, 累计 2.834s, 平均 0.075s, P50 0.000s, P95 0.451s, P99 0.574s, 最大 0.639s
- 分页随机等待: 38次, 累计 51.874s, 平均 1.365s, P50 1.426s, P95 1.958s, P99 1.961s, 最大 1.983s
- 响应JSON解析: 37次, 累计 0.044s, 平均 0.001s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.003s
- 响应读取: 37次, 累计 3.058s, 平均 0.083s, P50 0.008s, P95 0.310s, P99 0.403s, 最大 0.785s
- 批量写入: 19次, 累计 1.358s, 平均 0.071s, P50 0.070s, P95 0.079s, P99 0.079s, 最大 0.080s
- 批量去重查询: 26次, 累计 0.619s, 平均 0.024s, P50 0.023s, P95 0.027s, P99 0.027s, 最大 0.027s
- 藏宝阁HTTP请求: 38次, 累计 49.151s, 平均 1.293s, P50 0.769s, P95 2.552s, P99 4.692s, 最大 15.001s
最慢页面 Top 10:
- page=21, 总耗时=24.143s, 获取=23.913s, 处理=0.229s
- page=13, 总耗时=15.399s, 获取=15.134s, 处理=0.265s
- page=18, 总耗时=12.788s, 获取=12.431s, 处理=0.357s
- page=11, 总耗时=11.809s, 获取=11.445s, 处理=0.364s
- page=20, 总耗时=8.302s, 获取=8.003s, 处理=0.299s
- page=12, 总耗时=8.293s, 获取=8.182s, 处理=0.111s
- page=24, 总耗时=8.238s, 获取=7.614s, 处理=0.624s
- page=26, 总耗时=7.894s, 获取=7.679s, 处理=0.216s
- page=1, 总耗时=7.891s, 获取=7.464s, 处理=0.427s
- page=16, 总耗时=3.657s, 获取=3.093s, 处理=0.563s
==================================================