Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 74.642s
停止原因: checkpoint
账号: mpap833@163.com (ID=146), 代理ID: 11
页面: 尝试 14 / 成功 14 / 失败 0
数据: 处理 203 / 新增 119 / 重复 84 / 时间过滤 0 / 归档 187
Mailbox: 成功 64 / 失败 119
吞吐量: 2.72 items/s, 0.19 pages/s
异常: 请求 1 / 解析 0 / 状态异常 2 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.939s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.386s
- 分页抓取: 68.631s
- 历史归档: 0.232s
- 保存Checkpoint: 0.105s
- 保存运行统计: 0.172s
- 发送通知与更新资源统计: 4.175s
调用统计:
- Mailbox写入: 183次, 累计 2.051s, 平均 0.011s, P50 0.009s, P95 0.024s, P99 0.027s, 最大 0.044s
- 代理获取: 17次, 累计 1.006s, 平均 0.059s, P50 0.000s, P95 0.376s, P99 0.376s, 最大 0.630s
- 分页随机等待: 17次, 累计 21.508s, 平均 1.265s, P50 1.409s, P95 1.838s, P99 1.838s, 最大 1.902s
- 响应JSON解析: 16次, 累计 0.027s, 平均 0.002s, P50 0.002s, P95 0.004s, P99 0.004s, 最大 0.004s
- 响应读取: 16次, 累计 0.419s, 平均 0.026s, P50 0.016s, P95 0.062s, P99 0.062s, 最大 0.080s
- 批量写入: 11次, 累计 0.937s, 平均 0.085s, P50 0.083s, P95 0.090s, P99 0.090s, 最大 0.099s
- 批量去重查询: 14次, 累计 0.402s, 平均 0.029s, P50 0.028s, P95 0.035s, P99 0.035s, 最大 0.038s
- 藏宝阁HTTP请求: 17次, 累计 34.278s, 平均 2.016s, P50 0.801s, P95 6.491s, P99 6.491s, 最大 15.001s
最慢页面 Top 10:
- page=6, 总耗时=19.885s, 获取=19.744s, 处理=0.140s
- page=1, 总耗时=13.261s, 获取=12.612s, 处理=0.649s
- page=4, 总耗时=7.639s, 获取=6.998s, 处理=0.641s
- page=13, 总耗时=3.443s, 获取=3.069s, 处理=0.374s
- page=14, 总耗时=3.211s, 获取=3.122s, 处理=0.090s
- page=11, 总耗时=3.106s, 获取=2.619s, 处理=0.486s
- page=3, 总耗时=3.049s, 获取=2.516s, 处理=0.533s
- page=7, 总耗时=2.549s, 获取=2.140s, 处理=0.410s
- page=12, 总耗时=2.470s, 获取=2.172s, 处理=0.299s
- page=5, 总耗时=2.406s, 获取=2.190s, 处理=0.216s
==================================================