Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 95.204s
停止原因: checkpoint
账号: han40682@163.com (ID=17), 代理ID: 58
页面: 尝试 24 / 成功 24 / 失败 0
数据: 处理 351 / 新增 200 / 重复 151 / 时间过滤 0 / 归档 262
Mailbox: 成功 111 / 失败 200
吞吐量: 3.69 items/s, 0.25 pages/s
异常: 请求 2 / 解析 0 / 状态异常 1 / 密保 0 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 1.455s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.217s
- 分页抓取: 91.995s
- 历史归档: 0.426s
- 保存Checkpoint: 0.158s
- 保存运行统计: 0.228s
- 发送通知与更新资源统计: 0.724s
调用统计:
- Mailbox写入: 311次, 累计 2.902s, 平均 0.009s, P50 0.008s, P95 0.019s, P99 0.027s, 最大 0.051s
- 代理获取: 27次, 累计 2.466s, 平均 0.091s, P50 0.000s, P95 0.707s, P99 0.844s, 最大 0.914s
- 分页随机等待: 27次, 累计 35.752s, 平均 1.324s, P50 1.341s, P95 1.946s, P99 1.973s, 最大 1.994s
- 响应JSON解析: 25次, 累计 0.048s, 平均 0.002s, P50 0.002s, P95 0.003s, P99 0.004s, 最大 0.004s
- 响应读取: 26次, 累计 14.684s, 平均 0.565s, P50 0.003s, P95 0.037s, P99 0.050s, 最大 14.466s
- 批量写入: 23次, 累计 2.503s, 平均 0.109s, P50 0.109s, P95 0.112s, P99 0.116s, 最大 0.116s
- 批量去重查询: 24次, 累计 1.268s, 平均 0.053s, P50 0.052s, P95 0.055s, P99 0.056s, 最大 0.058s
- 藏宝阁HTTP请求: 27次, 累计 25.628s, 平均 0.949s, P50 0.579s, P95 2.333s, P99 3.072s, 最大 3.452s
最慢页面 Top 10:
- page=14, 总耗时=19.917s, 获取=19.435s, 处理=0.482s
- page=1, 总耗时=7.718s, 获取=7.227s, 处理=0.491s
- page=19, 总耗时=6.023s, 获取=5.498s, 处理=0.525s
- page=20, 总耗时=5.086s, 获取=4.755s, 处理=0.331s
- page=15, 总耗时=4.272s, 获取=4.000s, 处理=0.272s
- page=17, 总耗时=4.193s, 获取=3.736s, 处理=0.456s
- page=18, 总耗时=3.995s, 获取=3.612s, 处理=0.383s
- page=16, 总耗时=3.517s, 获取=3.093s, 处理=0.424s
- page=11, 总耗时=3.020s, 获取=2.495s, 处理=0.525s
- page=5, 总耗时=2.950s, 获取=2.583s, 处理=0.367s
==================================================