Message
[report.go:167] ========== RandomDraw 汇总与性能分析报告 ==========
结果: success_with_errors
总耗时: 94.035s
停止原因: checkpoint
账号: k064158@163.com (ID=103), 代理ID: 25
页面: 尝试 23 / 成功 23 / 失败 0
数据: 处理 333 / 新增 149 / 重复 184 / 时间过滤 0 / 归档 100
Mailbox: 成功 56 / 失败 149
吞吐量: 3.54 items/s, 0.24 pages/s
异常: 请求 2 / 解析 0 / 状态异常 2 / 密保 1 / 无代理 0 / 致命 0
最后错误: mailbox Mailbox:RoleFlow is full (size: 100000)
阶段耗时:
- 数据库表检查: 0.790s
- 获取Cookie: 0.002s
- 加载抓取配置: 0.097s
- 分页抓取: 89.047s
- 历史归档: 0.185s
- 保存Checkpoint: 0.092s
- 保存运行统计: 0.150s
- 发送通知与更新资源统计: 3.674s
调用统计:
- Mailbox写入: 205次, 累计 1.684s, 平均 0.008s, P50 0.007s, P95 0.018s, P99 0.024s, 最大 0.031s
- 代理获取: 27次, 累计 4.019s, 平均 0.149s, P50 0.000s, P95 0.620s, P99 1.437s, 最大 1.533s
- 分页随机等待: 27次, 累计 34.311s, 平均 1.271s, P50 1.273s, P95 1.852s, P99 1.903s, 最大 1.924s
- 响应JSON解析: 25次, 累计 0.042s, 平均 0.002s, P50 0.002s, P95 0.002s, P99 0.004s, 最大 0.004s
- 响应读取: 25次, 累计 0.386s, 平均 0.015s, P50 0.003s, P95 0.038s, P99 0.057s, 最大 0.079s
- 批量写入: 15次, 累计 1.109s, 平均 0.074s, P50 0.072s, P95 0.080s, P99 0.080s, 最大 0.093s
- 批量去重查询: 23次, 累计 0.576s, 平均 0.025s, P50 0.024s, P95 0.028s, P99 0.028s, 最大 0.035s
- 藏宝阁HTTP请求: 27次, 累计 34.460s, 平均 1.276s, P50 0.565s, P95 1.177s, P99 3.507s, 最大 15.003s
最慢页面 Top 10:
- page=8, 总耗时=20.205s, 获取=20.077s, 处理=0.129s
- page=1, 总耗时=12.291s, 获取=11.933s, 处理=0.358s
- page=9, 总耗时=8.435s, 获取=8.160s, 处理=0.274s
- page=3, 总耗时=5.383s, 获取=4.999s, 处理=0.383s
- page=23, 总耗时=4.141s, 获取=4.061s, 处理=0.080s
- page=7, 总耗时=3.223s, 获取=2.847s, 处理=0.376s
- page=5, 总耗时=3.079s, 获取=2.705s, 处理=0.375s
- page=15, 总耗时=2.766s, 获取=2.403s, 处理=0.363s
- page=2, 总耗时=2.681s, 获取=2.326s, 处理=0.355s
- page=16, 总耗时=2.665s, 获取=2.362s, 处理=0.303s
==================================================