Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 72.399s
停止原因: checkpoint
账号: xpbzuru@163.com (ID=27), 代理ID: 14
页面: 尝试 23 / 成功 23 / 失败 0
数据: 处理 339 / 新增 189 / 重复 150 / 时间过滤 0 / 归档 123
Mailbox: 成功 68 / 失败 189
吞吐量: 4.68 items/s, 0.32 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.376s
- 获取Cookie: 0.002s
- 加载抓取配置: 1.563s
- 分页抓取: 67.782s
- 历史归档: 0.227s
- 保存Checkpoint: 0.150s
- 保存运行统计: 0.209s
- 发送通知与更新资源统计: 1.091s
调用统计:
- Mailbox写入: 257次, 累计 4.212s, 平均 0.016s, P50 0.013s, P95 0.038s, P99 0.052s, 最大 0.069s
- 代理获取: 25次, 累计 2.656s, 平均 0.106s, P50 0.000s, P95 0.000s, P99 1.038s, 最大 1.618s
- 分页随机等待: 25次, 累计 33.597s, 平均 1.344s, P50 1.323s, P95 1.870s, P99 1.913s, 最大 1.965s
- 响应JSON解析: 24次, 累计 0.042s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.003s, 最大 0.004s
- 响应读取: 24次, 累计 0.277s, 平均 0.012s, P50 0.003s, P95 0.051s, P99 0.053s, 最大 0.064s
- 批量写入: 18次, 累计 1.878s, 平均 0.104s, P50 0.102s, P95 0.114s, P99 0.114s, 最大 0.131s
- 批量去重查询: 23次, 累计 1.168s, 平均 0.051s, P50 0.050s, P95 0.055s, P99 0.056s, 最大 0.058s
- 藏宝阁HTTP请求: 25次, 累计 14.033s, 平均 0.561s, P50 0.521s, P95 0.690s, P99 0.869s, 最大 1.576s
最慢页面 Top 10:
- page=1, 总耗时=9.187s, 获取=8.097s, 处理=1.090s
- page=23, 总耗时=6.416s, 获取=6.038s, 处理=0.378s
- page=16, 总耗时=3.826s, 获取=3.218s, 处理=0.608s
- page=15, 总耗时=3.319s, 获取=2.477s, 处理=0.841s
- page=3, 总耗时=3.107s, 获取=2.287s, 处理=0.819s
- page=17, 总耗时=2.972s, 获取=2.316s, 处理=0.656s
- page=4, 总耗时=2.920s, 获取=2.363s, 处理=0.557s
- page=14, 总耗时=2.876s, 获取=2.226s, 处理=0.650s
- page=13, 总耗时=2.546s, 获取=1.848s, 处理=0.698s
- page=2, 总耗时=2.531s, 获取=1.832s, 处理=0.699s
==================================================