Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 300.326s
停止原因: checkpoint
账号: bai2497623@163.com (ID=5), 代理ID: 4
页面: 尝试 25 / 成功 25 / 失败 0
数据: 处理 359 / 新增 224 / 重复 135 / 时间过滤 0 / 归档 265
Mailbox: 成功 145 / 失败 224
吞吐量: 1.20 items/s, 0.08 pages/s
异常: 请求 5 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.429s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.213s
- 分页抓取: 296.158s
- 历史归档: 0.434s
- 保存Checkpoint: 0.178s
- 保存运行统计: 0.263s
- 发送通知与更新资源统计: 1.651s
调用统计:
- Mailbox写入: 369次, 累计 125.574s, 平均 0.340s, P50 0.059s, P95 1.461s, P99 4.651s, 最大 9.615s
- 代理获取: 30次, 累计 5.552s, 平均 0.185s, P50 0.000s, P95 1.013s, P99 1.078s, 最大 1.254s
- 分页随机等待: 30次, 累计 35.553s, 平均 1.185s, P50 1.141s, P95 1.859s, P99 1.881s, 最大 1.934s
- 响应JSON解析: 25次, 累计 0.044s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.004s, 最大 0.004s
- 响应读取: 25次, 累计 0.269s, 平均 0.011s, P50 0.004s, P95 0.037s, P99 0.040s, 最大 0.055s
- 批量写入: 22次, 累计 2.972s, 平均 0.135s, P50 0.121s, P95 0.129s, P99 0.129s, 最大 0.437s
- 批量去重查询: 24次, 累计 1.454s, 平均 0.061s, P50 0.059s, P95 0.067s, P99 0.067s, 最大 0.067s
- 藏宝阁HTTP请求: 30次, 累计 43.012s, 平均 1.434s, P50 0.511s, P95 2.031s, P99 12.548s, 最大 12.553s
最慢页面 Top 10:
- page=2, 总耗时=71.688s, 获取=1.721s, 处理=69.967s
- page=1, 总耗时=48.248s, 获取=16.427s, 处理=31.821s
- page=3, 总耗时=38.310s, 获取=3.465s, 处理=34.844s
- page=4, 总耗时=27.002s, 获取=2.005s, 处理=24.997s
- page=5, 总耗时=24.546s, 获取=18.959s, 处理=5.586s
- page=7, 总耗时=9.027s, 获取=2.660s, 处理=6.367s
- page=12, 总耗时=7.746s, 获取=2.295s, 处理=5.452s
- page=6, 总耗时=7.247s, 获取=2.360s, 处理=4.888s
- page=14, 总耗时=6.711s, 获取=3.836s, 处理=2.875s
- page=11, 总耗时=5.592s, 获取=1.898s, 处理=3.694s
==================================================