Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 73.223s
停止原因: checkpoint
账号: z12436694@163.com (ID=60), 代理ID: 30
页面: 尝试 24 / 成功 24 / 失败 0
数据: 处理 354 / 新增 251 / 重复 103 / 时间过滤 0 / 归档 200
Mailbox: 成功 124 / 失败 251
吞吐量: 4.83 items/s, 0.33 pages/s
异常: 请求 1 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.458s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.216s
- 分页抓取: 68.514s
- 历史归档: 0.327s
- 保存Checkpoint: 0.142s
- 保存运行统计: 0.203s
- 发送通知与更新资源统计: 2.362s
调用统计:
- Mailbox写入: 375次, 累计 7.456s, 平均 0.020s, P50 0.011s, P95 0.049s, P99 0.162s, 最大 0.495s
- 代理获取: 25次, 累计 2.727s, 平均 0.109s, P50 0.000s, P95 0.000s, P99 0.909s, 最大 1.818s
- 分页随机等待: 25次, 累计 31.065s, 平均 1.243s, P50 1.293s, P95 1.943s, P99 1.956s, 最大 1.970s
- 响应JSON解析: 24次, 累计 0.043s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.003s, 最大 0.003s
- 响应读取: 24次, 累计 0.343s, 平均 0.014s, P50 0.010s, P95 0.022s, P99 0.044s, 最大 0.078s
- 批量写入: 23次, 累计 2.323s, 平均 0.101s, P50 0.097s, P95 0.117s, P99 0.122s, 最大 0.124s
- 批量去重查询: 24次, 累计 1.242s, 平均 0.052s, P50 0.046s, P95 0.056s, P99 0.057s, 最大 0.146s
- 藏宝阁HTTP请求: 25次, 累计 17.953s, 平均 0.718s, P50 0.568s, P95 1.169s, P99 1.384s, 最大 1.886s
最慢页面 Top 10:
- page=11, 总耗时=6.709s, 获取=5.040s, 处理=1.669s
- page=1, 总耗时=4.663s, 获取=3.628s, 处理=1.035s
- page=2, 总耗时=4.489s, 获取=3.739s, 处理=0.750s
- page=20, 总耗时=4.064s, 获取=2.206s, 处理=1.857s
- page=23, 总耗时=3.534s, 获取=2.445s, 处理=1.089s
- page=4, 总耗时=3.431s, 获取=2.775s, 处理=0.657s
- page=5, 总耗时=3.322s, 获取=2.643s, 处理=0.680s
- page=14, 总耗时=3.103s, 获取=2.502s, 处理=0.601s
- page=15, 总耗时=2.917s, 获取=2.430s, 处理=0.487s
- page=22, 总耗时=2.904s, 获取=2.435s, 处理=0.468s
==================================================