Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 83.766s
停止原因: checkpoint
账号: irierks@163.com (ID=14), 代理ID: 17
页面: 尝试 16 / 成功 16 / 失败 0
数据: 处理 225 / 新增 133 / 重复 92 / 时间过滤 0 / 归档 241
Mailbox: 成功 73 / 失败 133
吞吐量: 2.69 items/s, 0.19 pages/s
异常: 请求 3 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.959s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.268s
- 分页抓取: 78.309s
- 历史归档: 0.383s
- 保存Checkpoint: 0.130s
- 保存运行统计: 0.191s
- 发送通知与更新资源统计: 2.524s
调用统计:
- Mailbox写入: 206次, 累计 7.004s, 平均 0.034s, P50 0.014s, P95 0.127s, P99 0.304s, 最大 0.569s
- 代理获取: 19次, 累计 2.926s, 平均 0.154s, P50 0.000s, P95 0.819s, P99 0.819s, 最大 1.139s
- 分页随机等待: 19次, 累计 23.514s, 平均 1.238s, P50 1.164s, P95 1.840s, P99 1.840s, 最大 1.940s
- 响应JSON解析: 16次, 累计 0.029s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 16次, 累计 2.236s, 平均 0.140s, P50 0.035s, P95 0.542s, P99 0.542s, 最大 0.607s
- 批量写入: 15次, 累计 1.560s, 平均 0.104s, P50 0.094s, P95 0.128s, P99 0.128s, 最大 0.152s
- 批量去重查询: 15次, 累计 0.785s, 平均 0.052s, P50 0.050s, P95 0.069s, P99 0.069s, 最大 0.072s
- 藏宝阁HTTP请求: 19次, 累计 35.188s, 平均 1.852s, P50 0.907s, P95 6.922s, P99 6.922s, 最大 8.606s
最慢页面 Top 10:
- page=8, 总耗时=11.001s, 获取=10.593s, 处理=0.408s
- page=7, 总耗时=10.556s, 获取=9.587s, 处理=0.969s
- page=6, 总耗时=9.383s, 获取=8.922s, 处理=0.461s
- page=1, 总耗时=5.215s, 获取=4.359s, 处理=0.856s
- page=11, 总耗时=4.988s, 获取=2.092s, 处理=2.896s
- page=3, 总耗时=4.814s, 获取=3.388s, 处理=1.426s
- page=13, 总耗时=4.384s, 获取=3.669s, 处理=0.715s
- page=2, 总耗时=4.232s, 获取=3.072s, 处理=1.160s
- page=4, 总耗时=3.482s, 获取=2.981s, 处理=0.501s
- page=14, 总耗时=3.363s, 获取=2.484s, 处理=0.879s
==================================================