Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 116.640s
停止原因: checkpoint
账号: yidh8007@163.com (ID=105), 代理ID: 19
页面: 尝试 26 / 成功 26 / 失败 0
数据: 处理 374 / 新增 196 / 重复 178 / 时间过滤 0 / 归档 160
Mailbox: 成功 84 / 失败 196
吞吐量: 3.21 items/s, 0.22 pages/s
异常: 请求 1 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.496s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.216s
- 分页抓取: 112.184s
- 历史归档: 0.382s
- 保存Checkpoint: 0.185s
- 保存运行统计: 0.295s
- 发送通知与更新资源统计: 1.880s
调用统计:
- Mailbox写入: 280次, 累计 3.309s, 平均 0.012s, P50 0.010s, P95 0.029s, P99 0.037s, 最大 0.090s
- 代理获取: 29次, 累计 2.144s, 平均 0.074s, P50 0.000s, P95 0.435s, P99 0.817s, 最大 0.893s
- 分页随机等待: 29次, 累计 35.297s, 平均 1.217s, P50 1.178s, P95 1.830s, P99 1.841s, 最大 1.872s
- 响应JSON解析: 28次, 累计 0.050s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.003s, 最大 0.004s
- 响应读取: 28次, 累计 3.318s, 平均 0.118s, P50 0.004s, P95 0.550s, P99 0.678s, 最大 0.714s
- 批量写入: 22次, 累计 2.395s, 平均 0.109s, P50 0.107s, P95 0.113s, P99 0.117s, 最大 0.119s
- 批量去重查询: 25次, 累计 1.348s, 平均 0.054s, P50 0.052s, P95 0.059s, P99 0.063s, 最大 0.066s
- 藏宝阁HTTP请求: 29次, 累计 54.280s, 平均 1.872s, P50 0.598s, P95 5.128s, P99 5.236s, 最大 8.041s
最慢页面 Top 10:
- page=1, 总耗时=17.244s, 获取=16.477s, 处理=0.767s
- page=6, 总耗时=9.563s, 获取=9.228s, 处理=0.336s
- page=11, 总耗时=7.420s, 获取=7.014s, 处理=0.405s
- page=9, 总耗时=6.971s, 获取=6.553s, 处理=0.418s
- page=3, 总耗时=6.903s, 获取=6.290s, 处理=0.614s
- page=7, 总耗时=6.493s, 获取=6.108s, 处理=0.385s
- page=10, 总耗时=6.136s, 获取=5.627s, 处理=0.510s
- page=8, 总耗时=5.414s, 获取=4.990s, 处理=0.424s
- page=4, 总耗时=5.033s, 获取=4.647s, 处理=0.386s
- page=12, 总耗时=4.216s, 获取=3.793s, 处理=0.424s
==================================================