Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 79.425s
停止原因: checkpoint
账号: jrjmar05@163.com (ID=104), 代理ID: 11
页面: 尝试 17 / 成功 17 / 失败 0
数据: 处理 254 / 新增 145 / 重复 109 / 时间过滤 0 / 归档 123
Mailbox: 成功 64 / 失败 145
吞吐量: 3.20 items/s, 0.21 pages/s
异常: 请求 0 / 解析 0 / 状态异常 4 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.898s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.117s
- 分页抓取: 76.783s
- 历史归档: 0.206s
- 保存Checkpoint: 0.103s
- 保存运行统计: 0.165s
- 发送通知与更新资源统计: 1.151s
调用统计:
- Mailbox写入: 209次, 累计 1.861s, 平均 0.009s, P50 0.007s, P95 0.019s, P99 0.025s, 最大 0.039s
- 代理获取: 21次, 累计 0.698s, 平均 0.033s, P50 0.000s, P95 0.320s, P99 0.320s, 最大 0.378s
- 分页随机等待: 21次, 累计 24.113s, 平均 1.148s, P50 1.134s, P95 1.730s, P99 1.730s, 最大 1.937s
- 响应JSON解析: 21次, 累计 0.031s, 平均 0.001s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 21次, 累计 0.097s, 平均 0.005s, P50 0.002s, P95 0.020s, P99 0.020s, 最大 0.039s
- 批量写入: 16次, 累计 1.245s, 平均 0.078s, P50 0.077s, P95 0.081s, P99 0.081s, 最大 0.083s
- 批量去重查询: 17次, 累计 0.464s, 平均 0.027s, P50 0.026s, P95 0.031s, P99 0.031s, 最大 0.034s
- 藏宝阁HTTP请求: 21次, 累计 27.763s, 平均 1.322s, P50 0.565s, P95 2.594s, P99 2.594s, 最大 11.119s
最慢页面 Top 10:
- page=4, 总耗时=23.499s, 获取=23.256s, 处理=0.243s
- page=1, 总耗时=16.115s, 获取=15.703s, 处理=0.411s
- page=15, 总耗时=3.989s, 获取=3.694s, 处理=0.294s
- page=17, 总耗时=3.779s, 获取=3.636s, 处理=0.144s
- page=16, 总耗时=3.056s, 获取=2.699s, 处理=0.356s
- page=14, 总耗时=3.021s, 获取=2.403s, 处理=0.618s
- page=8, 总耗时=2.807s, 获取=2.366s, 处理=0.441s
- page=3, 总耗时=2.621s, 获取=2.077s, 处理=0.544s
- page=12, 总耗时=2.387s, 获取=1.847s, 处理=0.540s
- page=11, 总耗时=2.202s, 获取=1.773s, 处理=0.430s
==================================================