Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 64.142s
停止原因: checkpoint
账号: hn2jds@163.com (ID=212), 代理ID: 5
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 283 / 新增 180 / 重复 103 / 时间过滤 0 / 归档 112
Mailbox: 成功 81 / 失败 180
吞吐量: 4.41 items/s, 0.30 pages/s
异常: 请求 0 / 解析 0 / 状态异常 2 / 密保 2 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.593s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.235s
- 分页抓取: 59.720s
- 历史归档: 0.236s
- 保存Checkpoint: 0.135s
- 保存运行统计: 0.191s
- 发送通知与更新资源统计: 2.030s
调用统计:
- Mailbox写入: 261次, 累计 2.458s, 平均 0.009s, P50 0.008s, P95 0.019s, P99 0.031s, 最大 0.038s
- 代理获取: 21次, 累计 2.278s, 平均 0.108s, P50 0.000s, P95 0.840s, P99 0.840s, 最大 1.116s
- 分页随机等待: 21次, 累计 30.087s, 平均 1.433s, P50 1.424s, P95 1.893s, P99 1.893s, 最大 1.912s
- 响应JSON解析: 21次, 累计 0.035s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 21次, 累计 0.318s, 平均 0.015s, P50 0.006s, P95 0.050s, P99 0.050s, 最大 0.059s
- 批量写入: 18次, 累计 2.100s, 平均 0.117s, P50 0.094s, P95 0.124s, P99 0.124s, 最大 0.370s
- 批量去重查询: 19次, 累计 1.179s, 平均 0.062s, P50 0.046s, P95 0.062s, P99 0.062s, 最大 0.280s
- 藏宝阁HTTP请求: 21次, 累计 12.363s, 平均 0.589s, P50 0.500s, P95 1.213s, P99 1.213s, 最大 1.555s
最慢页面 Top 10:
- page=1, 总耗时=16.008s, 获取=15.473s, 处理=0.535s
- page=13, 总耗时=3.258s, 获取=2.304s, 处理=0.954s
- page=11, 总耗时=2.717s, 获取=2.401s, 处理=0.315s
- page=5, 总耗时=2.595s, 获取=1.907s, 处理=0.688s
- page=2, 总耗时=2.561s, 获取=2.059s, 处理=0.503s
- page=7, 总耗时=2.523s, 获取=1.949s, 处理=0.574s
- page=18, 总耗时=2.485s, 获取=2.271s, 处理=0.214s
- page=14, 总耗时=2.483s, 获取=2.089s, 处理=0.393s
- page=9, 总耗时=2.453s, 获取=2.126s, 处理=0.328s
- page=6, 总耗时=2.379s, 获取=1.721s, 处理=0.659s
==================================================