Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 94.838s
停止原因: checkpoint
账号: zqscm41@163.com (ID=140), 代理ID: 49
页面: 尝试 22 / 成功 22 / 失败 0
数据: 处理 321 / 新增 243 / 重复 78 / 时间过滤 0 / 归档 170
Mailbox: 成功 121 / 失败 243
吞吐量: 3.38 items/s, 0.23 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 2.056s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.672s
- 分页抓取: 87.799s
- 历史归档: 0.369s
- 保存Checkpoint: 0.181s
- 保存运行统计: 0.313s
- 发送通知与更新资源统计: 3.447s
调用统计:
- Mailbox写入: 364次, 累计 8.490s, 平均 0.023s, P50 0.014s, P95 0.062s, P99 0.213s, 最大 0.360s
- 代理获取: 24次, 累计 2.603s, 平均 0.108s, P50 0.000s, P95 0.000s, P99 0.742s, 最大 1.860s
- 分页随机等待: 24次, 累计 28.890s, 平均 1.204s, P50 1.237s, P95 1.953s, P99 1.976s, 最大 1.992s
- 响应JSON解析: 23次, 累计 0.039s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.003s, 最大 0.005s
- 响应读取: 24次, 累计 14.649s, 平均 0.610s, P50 0.002s, P95 0.045s, P99 0.048s, 最大 14.435s
- 批量写入: 21次, 累计 2.767s, 平均 0.132s, P50 0.127s, P95 0.147s, P99 0.147s, 最大 0.178s
- 批量去重查询: 22次, 累计 1.386s, 平均 0.063s, P50 0.062s, P95 0.068s, P99 0.070s, 最大 0.070s
- 藏宝阁HTTP请求: 24次, 累计 14.674s, 平均 0.611s, P50 0.562s, P95 0.665s, P99 0.806s, 最大 1.595s
最慢页面 Top 10:
- page=21, 总耗时=21.042s, 获取=20.816s, 处理=0.226s
- page=1, 总耗时=7.456s, 获取=6.045s, 处理=1.411s
- page=13, 总耗时=4.055s, 获取=2.524s, 处理=1.531s
- page=2, 总耗时=3.799s, 获取=2.132s, 处理=1.667s
- page=10, 总耗时=3.785s, 获取=2.259s, 处理=1.526s
- page=7, 总耗时=3.726s, 获取=2.522s, 处理=1.204s
- page=4, 总耗时=3.427s, 获取=2.040s, 处理=1.387s
- page=18, 总耗时=3.340s, 获取=1.161s, 处理=2.179s
- page=19, 总耗时=3.262s, 获取=2.582s, 处理=0.680s
- page=6, 总耗时=3.143s, 获取=2.129s, 处理=1.014s
==================================================