Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 96.542s
停止原因: checkpoint
账号: atatmc8408@163.com (ID=185), 代理ID: 50
页面: 尝试 20 / 成功 20 / 失败 0
数据: 处理 284 / 新增 191 / 重复 93 / 时间过滤 0 / 归档 128
Mailbox: 成功 69 / 失败 191
吞吐量: 2.94 items/s, 0.21 pages/s
异常: 请求 1 / 解析 0 / 状态异常 1 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.904s
- 获取Cookie: 0.001s
- 加载抓取配置: 0.108s
- 分页抓取: 93.411s
- 历史归档: 0.204s
- 保存Checkpoint: 0.110s
- 保存运行统计: 0.170s
- 发送通知与更新资源统计: 1.633s
调用统计:
- Mailbox写入: 260次, 累计 3.487s, 平均 0.013s, P50 0.010s, P95 0.033s, P99 0.041s, 最大 0.076s
- 代理获取: 22次, 累计 3.012s, 平均 0.137s, P50 0.000s, P95 0.314s, P99 0.332s, 最大 2.365s
- 分页随机等待: 22次, 累计 24.707s, 平均 1.123s, P50 0.958s, P95 1.638s, P99 1.669s, 最大 1.875s
- 响应JSON解析: 21次, 累计 0.034s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.002s
- 响应读取: 21次, 累计 6.981s, 平均 0.332s, P50 0.005s, P95 1.315s, P99 1.315s, 最大 3.826s
- 批量写入: 19次, 累计 1.568s, 平均 0.083s, P50 0.082s, P95 0.089s, P99 0.089s, 最大 0.090s
- 批量去重查询: 19次, 累计 0.528s, 平均 0.028s, P50 0.027s, P95 0.031s, P99 0.031s, 最大 0.031s
- 藏宝阁HTTP请求: 22次, 累计 44.792s, 平均 2.036s, P50 0.683s, P95 3.442s, P99 4.719s, 最大 15.001s
最慢页面 Top 10:
- page=7, 总耗时=29.738s, 获取=29.108s, 处理=0.631s
- page=6, 总耗时=8.991s, 获取=8.718s, 处理=0.273s
- page=1, 总耗时=6.299s, 获取=5.913s, 处理=0.386s
- page=4, 总耗时=5.829s, 获取=5.444s, 处理=0.385s
- page=2, 总耗时=4.705s, 获取=4.331s, 处理=0.374s
- page=5, 总耗时=3.918s, 获取=3.435s, 处理=0.484s
- page=13, 总耗时=3.100s, 获取=2.462s, 处理=0.639s
- page=9, 总耗时=3.001s, 获取=2.482s, 处理=0.519s
- page=3, 总耗时=2.923s, 获取=2.644s, 处理=0.278s
- page=14, 总耗时=2.687s, 获取=1.991s, 处理=0.696s
==================================================