Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 105.425s
停止原因: checkpoint
账号: ib094977@163.com (ID=164), 代理ID: 9
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 279 / 新增 163 / 重复 116 / 时间过滤 0 / 归档 211
Mailbox: 成功 87 / 失败 163
吞吐量: 2.65 items/s, 0.18 pages/s
异常: 请求 1 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.221s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.179s
- 分页抓取: 101.240s
- 历史归档: 0.334s
- 保存Checkpoint: 0.155s
- 保存运行统计: 0.205s
- 发送通知与更新资源统计: 2.089s
调用统计:
- Mailbox写入: 250次, 累计 3.811s, 平均 0.015s, P50 0.013s, P95 0.034s, P99 0.050s, 最大 0.071s
- 代理获取: 20次, 累计 1.703s, 平均 0.085s, P50 0.000s, P95 0.651s, P99 0.651s, 最大 1.052s
- 分页随机等待: 20次, 累计 26.227s, 平均 1.311s, P50 1.273s, P95 1.917s, P99 1.917s, 最大 1.977s
- 响应JSON解析: 19次, 累计 0.035s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.003s
- 响应读取: 19次, 累计 6.610s, 平均 0.348s, P50 0.189s, P95 1.130s, P99 1.130s, 最大 1.184s
- 批量写入: 18次, 累计 1.775s, 平均 0.099s, P50 0.095s, P95 0.106s, P99 0.106s, 最大 0.119s
- 批量去重查询: 19次, 累计 0.912s, 平均 0.048s, P50 0.048s, P95 0.055s, P99 0.055s, 最大 0.055s
- 藏宝阁HTTP请求: 20次, 累计 56.261s, 平均 2.813s, P50 1.660s, P95 7.270s, P99 7.270s, 最大 15.002s
最慢页面 Top 10:
- page=12, 总耗时=19.373s, 获取=18.964s, 处理=0.409s
- page=1, 总耗时=10.221s, 获取=9.652s, 处理=0.570s
- page=10, 总耗时=8.820s, 获取=8.098s, 处理=0.722s
- page=7, 总耗时=7.767s, 获取=7.597s, 处理=0.171s
- page=6, 总耗时=7.065s, 获取=6.657s, 处理=0.408s
- page=11, 总耗时=5.303s, 获取=4.484s, 处理=0.818s
- page=8, 总耗时=4.755s, 获取=4.147s, 处理=0.607s
- page=3, 总耗时=4.091s, 获取=3.703s, 处理=0.387s
- page=9, 总耗时=4.066s, 获取=3.515s, 处理=0.551s
- page=2, 总耗时=3.990s, 获取=3.471s, 处理=0.519s
==================================================