Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 145.022s
停止原因: checkpoint
账号: jz142805@163.com (ID=153), 代理ID: 26
页面: 尝试 28 / 成功 28 / 失败 0
数据: 处理 417 / 新增 220 / 重复 197 / 时间过滤 0 / 归档 120
Mailbox: 成功 110 / 失败 220
吞吐量: 2.88 items/s, 0.19 pages/s
异常: 请求 2 / 解析 0 / 状态异常 0 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.438s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.208s
- 分页抓取: 140.922s
- 历史归档: 0.333s
- 保存Checkpoint: 0.177s
- 保存运行统计: 0.251s
- 发送通知与更新资源统计: 1.692s
调用统计:
- Mailbox写入: 330次, 累计 4.028s, 平均 0.012s, P50 0.011s, P95 0.027s, P99 0.036s, 最大 0.051s
- 代理获取: 30次, 累计 2.601s, 平均 0.087s, P50 0.000s, P95 0.739s, P99 0.896s, 最大 0.966s
- 分页随机等待: 30次, 累计 33.579s, 平均 1.119s, P50 1.039s, P95 1.775s, P99 1.791s, 最大 1.859s
- 响应JSON解析: 28次, 累计 0.050s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.005s
- 响应读取: 28次, 累计 5.196s, 平均 0.186s, P50 0.010s, P95 0.763s, P99 0.864s, 最大 2.184s
- 批量写入: 22次, 累计 2.446s, 平均 0.111s, P50 0.109s, P95 0.118s, P99 0.125s, 最大 0.129s
- 批量去重查询: 28次, 累计 1.813s, 平均 0.065s, P50 0.056s, P95 0.066s, P99 0.067s, 最大 0.301s
- 藏宝阁HTTP请求: 30次, 累计 85.957s, 平均 2.865s, P50 0.817s, P95 10.849s, P99 12.835s, 最大 15.001s
最慢页面 Top 10:
- page=8, 总耗时=20.767s, 获取=20.601s, 处理=0.165s
- page=6, 总耗时=14.149s, 获取=13.826s, 处理=0.323s
- page=7, 总耗时=12.573s, 获取=12.141s, 处理=0.432s
- page=2, 总耗时=11.788s, 获取=11.328s, 处理=0.460s
- page=1, 总耗时=11.561s, 获取=11.088s, 处理=0.472s
- page=5, 总耗时=9.937s, 获取=9.619s, 处理=0.318s
- page=4, 总耗时=6.000s, 获取=5.686s, 处理=0.313s
- page=3, 总耗时=5.280s, 获取=4.940s, 处理=0.341s
- page=27, 总耗时=3.302s, 获取=2.876s, 处理=0.426s
- page=14, 总耗时=3.095s, 获取=2.478s, 处理=0.617s
==================================================