Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 69.457s
停止原因: checkpoint
账号: pq21188@163.com (ID=172), 代理ID: 64
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 280 / 新增 157 / 重复 123 / 时间过滤 0 / 归档 159
Mailbox: 成功 76 / 失败 157
吞吐量: 4.03 items/s, 0.27 pages/s
异常: 请求 0 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.141s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.173s
- 分页抓取: 65.956s
- 历史归档: 0.308s
- 保存Checkpoint: 0.130s
- 保存运行统计: 0.182s
- 发送通知与更新资源统计: 1.565s
调用统计:
- Mailbox写入: 233次, 累计 3.175s, 平均 0.014s, P50 0.009s, P95 0.034s, P99 0.093s, 最大 0.128s
- 代理获取: 20次, 累计 1.028s, 平均 0.051s, P50 0.000s, P95 0.000s, P99 0.000s, 最大 1.028s
- 分页随机等待: 20次, 累计 25.373s, 平均 1.269s, P50 1.327s, P95 1.806s, P99 1.806s, 最大 1.807s
- 响应JSON解析: 20次, 累计 0.031s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.002s
- 响应读取: 20次, 累计 0.908s, 平均 0.045s, P50 0.022s, P95 0.093s, P99 0.093s, 最大 0.430s
- 批量写入: 16次, 累计 1.388s, 平均 0.087s, P50 0.086s, P95 0.089s, P99 0.089s, 最大 0.101s
- 批量去重查询: 19次, 累计 0.814s, 平均 0.043s, P50 0.042s, P95 0.046s, P99 0.046s, 最大 0.054s
- 藏宝阁HTTP请求: 20次, 累计 26.739s, 平均 1.337s, P50 0.709s, P95 4.127s, P99 4.127s, 最大 5.374s
最慢页面 Top 10:
- page=1, 总耗时=12.406s, 获取=11.588s, 处理=0.817s
- page=13, 总耗时=7.877s, 获取=7.207s, 处理=0.670s
- page=7, 总耗时=4.889s, 获取=4.286s, 处理=0.603s
- page=3, 总耗时=3.413s, 获取=2.923s, 处理=0.490s
- page=10, 总耗时=3.066s, 获取=2.373s, 处理=0.693s
- page=8, 总耗时=2.943s, 获取=2.341s, 处理=0.602s
- page=17, 总耗时=2.909s, 获取=2.373s, 处理=0.536s
- page=16, 总耗时=2.888s, 获取=2.537s, 处理=0.351s
- page=11, 总耗时=2.850s, 获取=2.446s, 处理=0.403s
- page=14, 总耗时=2.826s, 获取=2.479s, 处理=0.347s
==================================================