Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 63.595s
停止原因: checkpoint
账号: yan8190021@163.com (ID=44), 代理ID: 12
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 277 / 新增 163 / 重复 114 / 时间过滤 0 / 归档 155
Mailbox: 成功 57 / 失败 163
吞吐量: 4.36 items/s, 0.30 pages/s
异常: 请求 0 / 解析 0 / 状态异常 2 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.855s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.102s
- 分页抓取: 60.493s
- 历史归档: 0.225s
- 保存Checkpoint: 0.104s
- 保存运行统计: 0.171s
- 发送通知与更新资源统计: 1.642s
调用统计:
- Mailbox写入: 220次, 累计 2.996s, 平均 0.014s, P50 0.010s, P95 0.036s, P99 0.048s, 最大 0.078s
- 代理获取: 21次, 累计 0.596s, 平均 0.028s, P50 0.000s, P95 0.000s, P99 0.000s, 最大 0.596s
- 分页随机等待: 21次, 累计 22.122s, 平均 1.053s, P50 0.960s, P95 1.780s, P99 1.780s, 最大 1.949s
- 响应JSON解析: 21次, 累计 0.033s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.002s
- 响应读取: 21次, 累计 0.662s, 平均 0.032s, P50 0.023s, P95 0.103s, P99 0.103s, 最大 0.134s
- 批量写入: 17次, 累计 1.310s, 平均 0.077s, P50 0.077s, P95 0.080s, P99 0.080s, 最大 0.080s
- 批量去重查询: 19次, 累计 0.503s, 平均 0.026s, P50 0.026s, P95 0.029s, P99 0.029s, 最大 0.031s
- 藏宝阁HTTP请求: 21次, 累计 23.030s, 平均 1.097s, P50 0.854s, P95 2.242s, P99 2.242s, 最大 3.930s
最慢页面 Top 10:
- page=1, 总耗时=7.467s, 获取=6.758s, 处理=0.709s
- page=5, 总耗时=7.268s, 获取=6.802s, 处理=0.466s
- page=19, 总耗时=4.728s, 获取=4.617s, 处理=0.111s
- page=6, 总耗时=3.666s, 获取=3.004s, 处理=0.662s
- page=10, 总耗时=3.533s, 获取=2.783s, 处理=0.750s
- page=13, 总耗时=3.473s, 获取=3.083s, 处理=0.391s
- page=14, 总耗时=3.248s, 获取=2.708s, 处理=0.540s
- page=12, 总耗时=2.858s, 获取=2.418s, 处理=0.440s
- page=18, 总耗时=2.693s, 获取=2.404s, 处理=0.289s
- page=2, 总耗时=2.548s, 获取=1.954s, 处理=0.594s
==================================================