Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 86.811s
停止原因: checkpoint
账号: jz142805@163.com (ID=153), 代理ID: 58
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 279 / 新增 178 / 重复 101 / 时间过滤 0 / 归档 162
Mailbox: 成功 111 / 失败 178
吞吐量: 3.21 items/s, 0.22 pages/s
异常: 请求 2 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.473s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.212s
- 分页抓取: 82.543s
- 历史归档: 0.327s
- 保存Checkpoint: 0.161s
- 保存运行统计: 0.228s
- 发送通知与更新资源统计: 1.865s
调用统计:
- Mailbox写入: 289次, 累计 4.148s, 平均 0.014s, P50 0.010s, P95 0.038s, P99 0.066s, 最大 0.093s
- 代理获取: 23次, 累计 3.373s, 平均 0.147s, P50 0.000s, P95 0.790s, P99 0.882s, 最大 1.002s
- 分页随机等待: 23次, 累计 26.348s, 平均 1.146s, P50 1.115s, P95 1.852s, P99 1.932s, 最大 1.940s
- 响应JSON解析: 21次, 累计 0.038s, 平均 0.002s, P50 0.002s, P95 0.004s, P99 0.004s, 最大 0.004s
- 响应读取: 22次, 累计 14.858s, 平均 0.675s, P50 0.003s, P95 0.088s, P99 0.097s, 最大 14.435s
- 批量写入: 18次, 累计 1.994s, 平均 0.111s, P50 0.110s, P95 0.117s, P99 0.117s, 最大 0.118s
- 批量去重查询: 19次, 累计 1.019s, 平均 0.054s, P50 0.053s, P95 0.058s, P99 0.058s, 最大 0.059s
- 藏宝阁HTTP请求: 23次, 累计 17.539s, 平均 0.763s, P50 0.697s, P95 1.144s, P99 1.177s, 最大 1.850s
最慢页面 Top 10:
- page=16, 总耗时=19.035s, 获取=18.843s, 处理=0.192s
- page=12, 总耗时=12.838s, 获取=12.290s, 处理=0.548s
- page=1, 总耗时=9.020s, 获取=8.279s, 处理=0.741s
- page=11, 总耗时=4.070s, 获取=3.531s, 处理=0.539s
- page=19, 总耗时=3.440s, 获取=3.121s, 处理=0.319s
- page=7, 总耗时=3.351s, 获取=2.648s, 处理=0.702s
- page=2, 总耗时=3.161s, 获取=2.703s, 处理=0.458s
- page=15, 总耗时=2.864s, 获取=2.079s, 处理=0.785s
- page=10, 总耗时=2.799s, 获取=1.863s, 处理=0.936s
- page=8, 总耗时=2.636s, 获取=1.999s, 处理=0.637s
==================================================