Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 128.191s
停止原因: checkpoint
账号: qcpni02818@163.com (ID=99), 代理ID: 13
页面: 尝试 19 / 成功 19 / 失败 0
数据: 处理 282 / 新增 151 / 重复 131 / 时间过滤 0 / 归档 167
Mailbox: 成功 54 / 失败 151
吞吐量: 2.20 items/s, 0.15 pages/s
异常: 请求 0 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.830s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.101s
- 分页抓取: 123.984s
- 历史归档: 0.230s
- 保存Checkpoint: 0.089s
- 保存运行统计: 0.154s
- 发送通知与更新资源统计: 2.802s
调用统计:
- Mailbox写入: 205次, 累计 2.369s, 平均 0.012s, P50 0.009s, P95 0.025s, P99 0.027s, 最大 0.040s
- 代理获取: 21次, 累计 0.867s, 平均 0.041s, P50 0.000s, P95 0.416s, P99 0.416s, 最大 0.451s
- 分页随机等待: 21次, 累计 28.175s, 平均 1.342s, P50 1.296s, P95 1.883s, P99 1.883s, 最大 1.959s
- 响应JSON解析: 21次, 累计 0.034s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.002s, 最大 0.004s
- 响应读取: 21次, 累计 2.882s, 平均 0.137s, P50 0.067s, P95 0.342s, P99 0.342s, 最大 0.964s
- 批量写入: 17次, 累计 1.254s, 平均 0.074s, P50 0.072s, P95 0.080s, P99 0.080s, 最大 0.088s
- 批量去重查询: 19次, 累计 0.587s, 平均 0.031s, P50 0.024s, P95 0.041s, P99 0.041s, 最大 0.121s
- 藏宝阁HTTP请求: 21次, 累计 76.844s, 平均 3.659s, P50 2.506s, P95 9.365s, P99 9.365s, 最大 13.651s
最慢页面 Top 10:
- page=8, 总耗时=15.409s, 获取=15.111s, 处理=0.298s
- page=7, 总耗时=14.279s, 获取=13.893s, 处理=0.386s
- page=2, 总耗时=11.209s, 获取=10.912s, 处理=0.297s
- page=10, 总耗时=9.780s, 获取=9.408s, 处理=0.372s
- page=1, 总耗时=8.796s, 获取=8.381s, 处理=0.415s
- page=12, 总耗时=7.365s, 获取=6.848s, 处理=0.517s
- page=18, 总耗时=6.022s, 获取=5.645s, 处理=0.378s
- page=11, 总耗时=6.019s, 获取=5.622s, 处理=0.396s
- page=14, 总耗时=5.934s, 获取=5.451s, 处理=0.483s
- page=13, 总耗时=5.321s, 获取=4.981s, 处理=0.340s
==================================================