Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 78.070s
停止原因: checkpoint
账号: fan978329@163.com (ID=10), 代理ID: 57
页面: 尝试 22 / 成功 22 / 失败 0
数据: 处理 317 / 新增 186 / 重复 131 / 时间过滤 0 / 归档 154
Mailbox: 成功 88 / 失败 186
吞吐量: 4.06 items/s, 0.28 pages/s
异常: 请求 2 / 解析 0 / 状态异常 2 / 密保 2 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.922s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.110s
- 分页抓取: 75.477s
- 历史归档: 0.192s
- 保存Checkpoint: 0.111s
- 保存运行统计: 0.174s
- 发送通知与更新资源统计: 1.083s
调用统计:
- Mailbox写入: 274次, 累计 2.743s, 平均 0.010s, P50 0.008s, P95 0.019s, P99 0.028s, 最大 0.085s
- 代理获取: 26次, 累计 3.027s, 平均 0.116s, P50 0.000s, P95 0.370s, P99 0.375s, 最大 1.550s
- 分页随机等待: 26次, 累计 36.384s, 平均 1.399s, P50 1.475s, P95 1.899s, P99 1.966s, 最大 1.996s
- 响应JSON解析: 24次, 累计 0.038s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 24次, 累计 0.350s, 平均 0.015s, P50 0.003s, P95 0.040s, P99 0.043s, 最大 0.058s
- 批量写入: 18次, 累计 1.474s, 平均 0.082s, P50 0.082s, P95 0.084s, P99 0.084s, 最大 0.085s
- 批量去重查询: 22次, 累计 0.598s, 平均 0.027s, P50 0.027s, P95 0.029s, P99 0.029s, 最大 0.031s
- 藏宝阁HTTP请求: 26次, 累计 18.830s, 平均 0.724s, P50 0.588s, P95 0.903s, P99 0.908s, 最大 4.425s
最慢页面 Top 10:
- page=2, 总耗时=15.086s, 获取=14.739s, 处理=0.347s
- page=9, 总耗时=6.091s, 获取=5.487s, 处理=0.604s
- page=10, 总耗时=4.700s, 获取=4.408s, 处理=0.292s
- page=1, 总耗时=4.591s, 获取=4.038s, 处理=0.553s
- page=19, 总耗时=4.071s, 获取=3.820s, 处理=0.251s
- page=8, 总耗时=3.408s, 获取=2.903s, 处理=0.504s
- page=16, 总耗时=3.105s, 获取=2.494s, 处理=0.611s
- page=11, 总耗时=2.806s, 获取=2.657s, 处理=0.149s
- page=3, 总耗时=2.740s, 获取=2.453s, 处理=0.287s
- page=4, 总耗时=2.702s, 获取=2.225s, 处理=0.476s
==================================================