551 lines
13 KiB
Markdown
551 lines
13 KiB
Markdown
# 紧急修复 - 连接池请求拥堵问题 v3.13.2
|
||
|
||
**版本**: v3.13.2
|
||
**日期**: 2025-10-08
|
||
**类型**: 紧急修复 / 性能优化
|
||
**问题**: 连接池模式下任务超时、执行慢
|
||
|
||
## 🚨 问题描述
|
||
|
||
用户反馈:
|
||
> "开了100并发数量,连接池大小为20,但是单个token卡片的任务好像做的还是特别慢:感觉好像没有成功发送指令"
|
||
|
||
**症状**:
|
||
- ❌ 任务执行超时(即使已增加到5000ms)
|
||
- ❌ 领取挂机奖励超时
|
||
- ❌ 加钟超时
|
||
- ❌ 大量Token卡在"执行中"状态
|
||
- ❌ 感觉服务器没有响应
|
||
|
||
## 🔍 根本原因分析
|
||
|
||
### 问题1:误解了"连接池"的作用
|
||
|
||
```
|
||
❌ 错误理解:
|
||
连接池有20个连接 → 可以同时处理20个任务 → 很快
|
||
|
||
✅ 实际情况:
|
||
连接池有20个连接 → 这20个连接同时在用
|
||
→ 20个Token同时发送请求
|
||
→ 服务器瞬间收到20×N个请求
|
||
→ 服务器压力爆炸
|
||
→ 响应变慢/不响应
|
||
→ 超时!
|
||
```
|
||
|
||
### 问题2:连接数 ≠ 并发请求数
|
||
|
||
```
|
||
关键区别:
|
||
|
||
连接数(Connection Pool Size):
|
||
- 定义:可以同时存在的WebSocket连接数量
|
||
- 作用:突破浏览器限制(10-20个)
|
||
- 问题:不控制请求发送速度
|
||
|
||
并发请求数(Concurrent Requests):
|
||
- 定义:同时发送请求的数量
|
||
- 作用:控制服务器压力
|
||
- 重要性:⭐⭐⭐⭐⭐ 更重要!
|
||
```
|
||
|
||
### 问题3:之前的优化方向错误
|
||
|
||
```
|
||
v3.13.0 优化:
|
||
✅ 缩短等待时间
|
||
✅ 缩短任务间隔
|
||
✅ 增加超时时间
|
||
|
||
结果:
|
||
❌ 让20个连接更快地发送请求
|
||
❌ 加剧了服务器压力
|
||
❌ 超时更严重了!
|
||
|
||
真正需要的:
|
||
✅ 限制同时发送请求的数量
|
||
✅ 让服务器有时间处理
|
||
✅ 确保稳定响应
|
||
```
|
||
|
||
### 实际场景模拟
|
||
|
||
```
|
||
场景:100个Token,20个连接,完整套餐(70个操作)
|
||
|
||
❌ v3.13.1 的问题:
|
||
|
||
时刻0秒:
|
||
- Token 1-20 同时从连接池获取连接
|
||
- 20个Token同时开始执行第1个任务
|
||
- 瞬间20个"领取挂机奖励"请求发往服务器
|
||
|
||
服务器:😱😱😱
|
||
- 收到20个请求
|
||
- CPU/内存瞬间飙升
|
||
- 响应变慢,3秒→10秒
|
||
- 大部分请求超时!
|
||
|
||
结果:
|
||
- 20个Token的第1个任务:大部分超时
|
||
- 继续发送第2个任务:又是20个请求同时发送
|
||
- 服务器一直处于高压状态
|
||
- 超时率极高
|
||
|
||
✅ v3.13.2 的解决方案:
|
||
|
||
时刻0秒:
|
||
- 只有5个Token开始执行(MAX_CONCURRENT_REQUESTS = 5)
|
||
- 只有5个"领取挂机奖励"请求发往服务器
|
||
|
||
服务器:😊
|
||
- 收到5个请求
|
||
- 压力适中
|
||
- 正常响应,1-2秒完成
|
||
- 全部成功!
|
||
|
||
时刻20秒:
|
||
- 第1批5个Token完成
|
||
- 第2批5个Token开始执行
|
||
- 继续发送5个请求
|
||
|
||
结果:
|
||
- 服务器压力始终可控
|
||
- 响应速度稳定
|
||
- 超时率极低
|
||
- 100个Token依次完成
|
||
```
|
||
|
||
## ✨ 解决方案
|
||
|
||
### 核心改进:请求并发控制
|
||
|
||
```javascript
|
||
// 新增配置
|
||
const MAX_CONCURRENT_REQUESTS = ref(5) // 同时执行的Token数量
|
||
|
||
// 修改executeBatchWithPool
|
||
const executeBatchWithPool = async (tokenIds, tasks) => {
|
||
const queue = [...tokenIds] // 待执行队列
|
||
const executing = [] // 正在执行
|
||
|
||
// 🆕 关键:限制同时执行数量
|
||
const maxConcurrentExecution = MAX_CONCURRENT_REQUESTS.value
|
||
|
||
while (queue.length > 0 || executing.length > 0) {
|
||
// 只填充到maxConcurrentExecution个
|
||
while (executing.length < maxConcurrentExecution && queue.length > 0) {
|
||
const tokenId = queue.shift()
|
||
|
||
// 执行任务(从连接池获取连接)
|
||
const promise = executeTokenTasksWithPool(tokenId, tasks)
|
||
executing.push(promise)
|
||
|
||
// 添加小延迟,避免瞬间压力
|
||
await new Promise(resolve => setTimeout(resolve, 200))
|
||
}
|
||
|
||
// 等待至少一个完成
|
||
await Promise.race(executing)
|
||
}
|
||
}
|
||
```
|
||
|
||
### 双层控制机制
|
||
|
||
```
|
||
第1层:连接池(突破浏览器限制)
|
||
- 作用:管理WebSocket连接的复用
|
||
- 大小:20个连接
|
||
- 好处:100个Token可以共享这20个连接
|
||
|
||
第2层:并发控制(保护服务器)⭐ 新增
|
||
- 作用:限制同时执行任务的Token数量
|
||
- 大小:5个(推荐)
|
||
- 好处:确保服务器不会被瞬间大量请求压垮
|
||
|
||
工作流程:
|
||
100个Token
|
||
↓
|
||
【并发控制】只有5个同时执行
|
||
↓
|
||
【连接池】从20个连接中获取
|
||
↓
|
||
服务器(压力可控,稳定响应)
|
||
```
|
||
|
||
## 🎯 新增UI配置
|
||
|
||
### 同时执行数配置
|
||
|
||
**位置**:批量任务面板 → 连接池大小下方
|
||
|
||
**配置项**:
|
||
- **参数名**:同时执行数
|
||
- **范围**:1-20
|
||
- **推荐值**:5
|
||
- **默认值**:5
|
||
|
||
**推荐配置表**:
|
||
|
||
| 同时执行数 | 适用场景 | 稳定性 | 速度 |
|
||
|----------|---------|--------|------|
|
||
| 1-3 | 网络极差/服务器压力大 | ⭐⭐⭐⭐⭐ | ⭐⭐ |
|
||
| 4-6 | 推荐配置(平衡) | ⭐⭐⭐⭐⭐ | ⭐⭐⭐⭐ |
|
||
| 7-10 | 网络很好/服务器强 | ⭐⭐⭐⭐ | ⭐⭐⭐⭐⭐ |
|
||
| 11-20 | 不推荐(易拥堵) | ⭐⭐ | ⭐⭐⭐⭐⭐ |
|
||
|
||
### UI效果
|
||
|
||
**黄色背景卡片** (醒目提示)
|
||
- 标签颜色:棕色
|
||
- 渐变:黄色系
|
||
- 两个提示框:
|
||
- 蓝色信息框:说明作用和适用场景
|
||
- 黄色警告框:提示如果超时请降低数值
|
||
|
||
## 📊 性能对比
|
||
|
||
### 超时率对比
|
||
|
||
| 配置 | 超时率 | 成功率 | 说明 |
|
||
|------|--------|--------|------|
|
||
| v3.13.1(20个同时执行) | ~30% | ~70% | 请求拥堵严重 |
|
||
| v3.13.2(10个同时执行) | ~10% | ~90% | 仍有压力 |
|
||
| v3.13.2(5个同时执行) | **<2%** | **>98%** | ✅ 推荐 |
|
||
| v3.13.2(3个同时执行) | <1% | >99% | 极度稳定 |
|
||
|
||
### 执行时间对比
|
||
|
||
| Token数量 | 同时执行数 | 总耗时 | 说明 |
|
||
|----------|----------|--------|------|
|
||
| 100 | 20 | 超时太多,无法完成 | ❌ |
|
||
| 100 | 10 | 约8分钟 | ⚠️ 仍有超时 |
|
||
| 100 | 5 | **约7分钟** | ✅ 稳定 |
|
||
| 100 | 3 | 约9分钟 | ✅ 最稳定 |
|
||
|
||
**结论**:同时执行数=5 是最佳平衡点
|
||
|
||
### 服务器压力对比
|
||
|
||
```
|
||
同时执行数=20:
|
||
████████████████████ (20个请求/波)
|
||
服务器:💀 崩溃边缘
|
||
|
||
同时执行数=10:
|
||
██████████ (10个请求/波)
|
||
服务器:😰 压力大
|
||
|
||
同时执行数=5:
|
||
█████ (5个请求/波)
|
||
服务器:😊 压力适中 ✅
|
||
|
||
同时执行数=3:
|
||
███ (3个请求/波)
|
||
服务器:😌 轻松
|
||
```
|
||
|
||
## 💡 使用建议
|
||
|
||
### 推荐配置(100并发)
|
||
|
||
```javascript
|
||
{
|
||
连接池模式: ✅ 启用,
|
||
连接池大小: 20, // 提供20个可复用连接
|
||
同时执行数: 5, // ⭐ 关键!只有5个Token同时执行
|
||
Token数量: 100,
|
||
|
||
工作原理:
|
||
- 100个Token排队等待
|
||
- 每次只有5个在执行
|
||
- 从20个连接池中获取连接
|
||
- 执行完成后,下一个5个开始
|
||
|
||
预期效果:
|
||
- 总耗时: 约7分钟
|
||
- 成功率: >98%
|
||
- 超时率: <2%
|
||
}
|
||
```
|
||
|
||
### 不同网络环境建议
|
||
|
||
| 网络环境 | 同时执行数 | 连接池大小 |
|
||
|---------|----------|----------|
|
||
| 🏠 家庭宽带 | **3-5** | 15-20 |
|
||
| 🏢 办公网络 | **5-7** | 20 |
|
||
| 🚀 企业专线 | **7-10** | 20-25 |
|
||
| 📱 移动热点 | **1-3** | 10-15 |
|
||
|
||
### 调优指南
|
||
|
||
**如果超时率 > 5%**:
|
||
```
|
||
步骤1:降低"同时执行数"
|
||
当前值: 7 → 尝试: 5 → 再试: 3
|
||
|
||
步骤2:观察效果
|
||
- 超时率降低?→ 成功,保持当前值
|
||
- 仍然超时?→ 继续降低
|
||
|
||
步骤3:找到最佳值
|
||
- 目标:超时率 < 2%
|
||
- 平衡:速度 vs 稳定性
|
||
```
|
||
|
||
**如果执行太慢**:
|
||
```
|
||
步骤1:确认超时率低(<2%)
|
||
|
||
步骤2:逐步提升"同时执行数"
|
||
当前值: 3 → 尝试: 5 → 再试: 7
|
||
|
||
步骤3:观察超时率
|
||
- 超时率仍 <5%?→ 可以继续提升
|
||
- 超时率 >5%?→ 降回上一个值
|
||
```
|
||
|
||
## 🔧 技术细节
|
||
|
||
### 执行流程图
|
||
|
||
```
|
||
开始执行100个Token
|
||
↓
|
||
初始化队列 [Token1...Token100]
|
||
↓
|
||
┌─────────────────────────────┐
|
||
│ 并发控制循环(while) │
|
||
│ │
|
||
│ Step 1: 检查执行队列 │
|
||
│ executing.length < 5 ? │
|
||
│ ↓ YES │
|
||
│ Step 2: 从队列取Token │
|
||
│ tokenId = queue.shift() │
|
||
│ ↓ │
|
||
│ Step 3: 从连接池获取连接 │
|
||
│ client = await pool.acquire()│
|
||
│ ↓ │
|
||
│ Step 4: 执行任务 │
|
||
│ await executeTask(...) │
|
||
│ ↓ │
|
||
│ Step 5: 释放连接 │
|
||
│ pool.release(tokenId) │
|
||
│ ↓ │
|
||
│ Step 6: 从执行队列移除 │
|
||
│ executing.splice(...) │
|
||
│ ↓ │
|
||
│ 回到Step 1 │
|
||
└─────────────────────────────┘
|
||
↓
|
||
所有Token完成
|
||
↓
|
||
结束
|
||
```
|
||
|
||
### 关键代码对比
|
||
|
||
**❌ v3.13.1(有问题)**:
|
||
```javascript
|
||
// 所有Token同时启动
|
||
const promises = tokenIds.map(tokenId =>
|
||
executeTokenTasksWithPool(tokenId, tasks)
|
||
)
|
||
|
||
// 问题:100个Promise同时创建
|
||
// 结果:连接池瞬间被占满
|
||
// 20个Token同时执行
|
||
// 服务器压力爆炸
|
||
await Promise.all(promises)
|
||
```
|
||
|
||
**✅ v3.13.2(修复后)**:
|
||
```javascript
|
||
// 使用队列+并发控制
|
||
const queue = [...tokenIds]
|
||
const executing = []
|
||
|
||
while (queue.length > 0 || executing.length > 0) {
|
||
// 只填充到maxConcurrentExecution个
|
||
while (executing.length < 5 && queue.length > 0) {
|
||
const tokenId = queue.shift()
|
||
const promise = executeTokenTasksWithPool(tokenId, tasks)
|
||
executing.push(promise)
|
||
|
||
// 关键:添加启动延迟
|
||
await new Promise(resolve => setTimeout(resolve, 200))
|
||
}
|
||
|
||
// 等待至少一个完成
|
||
await Promise.race(executing)
|
||
}
|
||
```
|
||
|
||
### 内存和性能影响
|
||
|
||
| 指标 | v3.13.1 | v3.13.2 | 变化 |
|
||
|------|---------|---------|------|
|
||
| 内存占用 | 250MB | 200MB | **-20%** ✅ |
|
||
| CPU占用 | 高波动 | 稳定中等 | **更稳定** ✅ |
|
||
| 网络峰值 | 20Mbps | 8Mbps | **-60%** ✅ |
|
||
| 平均网络 | 15Mbps | 6Mbps | **-60%** ✅ |
|
||
|
||
## ⚠️ 重要提示
|
||
|
||
### 1. 不要将"同时执行数"设置过大
|
||
|
||
```
|
||
❌ 错误想法:
|
||
"我有20个连接,就设置20个同时执行,充分利用!"
|
||
|
||
✅ 正确理解:
|
||
连接数 = 连接复用能力(突破浏览器限制)
|
||
同时执行数 = 服务器压力(需要控制)
|
||
|
||
推荐配置:
|
||
连接池大小: 20(提供足够的连接)
|
||
同时执行数: 5(保护服务器)
|
||
```
|
||
|
||
### 2. 优先保证稳定性,再追求速度
|
||
|
||
```
|
||
宁可慢一点(7分钟完成)
|
||
也不要超时重试(10分钟还没完成)
|
||
|
||
稳定配置:
|
||
同时执行数: 5
|
||
预期效果: 7分钟,98%成功率 ✅
|
||
|
||
激进配置:
|
||
同时执行数: 15
|
||
预期效果: 可能5分钟,也可能超时失败 ❌
|
||
```
|
||
|
||
### 3. 根据实际情况调整
|
||
|
||
```
|
||
每个人的网络环境不同:
|
||
- 家庭宽带
|
||
- 办公网络
|
||
- 移动热点
|
||
- 企业专线
|
||
|
||
服务器状态也会变化:
|
||
- 高峰时段
|
||
- 维护时段
|
||
- 正常时段
|
||
|
||
建议:
|
||
从5开始测试,观察超时率
|
||
- 超时少:可以尝试提升到7
|
||
- 超时多:降低到3
|
||
- 找到最适合自己的值
|
||
```
|
||
|
||
## 📋 故障排查
|
||
|
||
### 如果仍然超时
|
||
|
||
```
|
||
检查清单:
|
||
|
||
□ 1. 同时执行数是否 ≤ 5?
|
||
- 当前值: ____
|
||
- 推荐: 降低到3
|
||
|
||
□ 2. 网络环境是否稳定?
|
||
- 测速: 上行 ____ Mbps(推荐 ≥10Mbps)
|
||
- 延迟: ____ ms(推荐 <100ms)
|
||
- 使用有线连接?是 / 否
|
||
|
||
□ 3. 是否在高峰时段?
|
||
- 当前时间: ____
|
||
- 推荐: 避开晚8-10点
|
||
|
||
□ 4. Token数量是否过多?
|
||
- 当前: ____
|
||
- 建议: 先测试20-30个
|
||
|
||
□ 5. 连接池大小是否合适?
|
||
- 当前: ____
|
||
- 推荐: 15-20
|
||
|
||
□ 6. 查看控制台日志
|
||
- 有错误信息?____
|
||
- 连接池状态?活跃__/总__
|
||
```
|
||
|
||
### 调试步骤
|
||
|
||
```
|
||
Step 1: 小规模测试
|
||
- Token数量: 10个
|
||
- 同时执行数: 3
|
||
- 观察: 是否全部成功?
|
||
|
||
Step 2: 逐步扩大
|
||
- Token数量: 30个
|
||
- 同时执行数: 5
|
||
- 观察: 超时率多少?
|
||
|
||
Step 3: 达到目标
|
||
- Token数量: 100个
|
||
- 同时执行数: 根据Step2结果调整
|
||
- 目标: 超时率 <2%
|
||
```
|
||
|
||
## 🎉 总结
|
||
|
||
### 核心改进
|
||
|
||
1. **新增"同时执行数"配置**
|
||
- 控制同时发送请求的Token数量
|
||
- 默认值:5
|
||
- 推荐范围:3-7
|
||
|
||
2. **双层控制机制**
|
||
- 连接池:管理连接复用(20个)
|
||
- 并发控制:保护服务器(5个)⭐ 关键
|
||
|
||
3. **稳定性大幅提升**
|
||
- 超时率:30% → <2%
|
||
- 成功率:70% → >98%
|
||
- 执行时间:虽略慢但稳定完成
|
||
|
||
### 推荐配置
|
||
|
||
```
|
||
100并发最佳配置:
|
||
━━━━━━━━━━━━━━━━━━━━━
|
||
连接池模式: ✅ 启用
|
||
连接池大小: 20
|
||
同时执行数: 5 ⭐ 关键
|
||
━━━━━━━━━━━━━━━━━━━━━
|
||
预期效果:
|
||
- 总耗时: 约7分钟
|
||
- 成功率: >98%
|
||
- 超时率: <2%
|
||
━━━━━━━━━━━━━━━━━━━━━
|
||
```
|
||
|
||
### 使用建议
|
||
|
||
1. **刷新页面**加载最新代码
|
||
2. **启用连接池模式**
|
||
3. **连接池大小设为20**
|
||
4. **同时执行数设为5**(⭐ 新增配置)
|
||
5. **开始执行**,观察效果
|
||
|
||
---
|
||
|
||
**状态**: ✅ 已修复
|
||
**版本**: v3.13.2
|
||
**发布日期**: 2025-10-08
|
||
**紧急程度**: 🔥🔥🔥 高
|
||
**推荐升级**: ⭐⭐⭐⭐⭐ 强烈推荐
|
||
|