File size: 7,590 Bytes
4402aa4 |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 213 214 215 216 217 218 219 220 221 222 223 224 225 226 227 228 229 230 231 232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 266 267 268 269 270 271 272 273 274 275 276 277 278 279 280 281 282 283 284 285 286 287 288 289 290 291 292 293 294 295 296 297 298 |
# OWL项目Docker使用指南
本文档提供了如何使用Docker运行OWL项目的详细说明。
## 前提条件
- 安装 [Docker](https://docs.docker.com/get-docker/)
- 安装 [Docker Compose](https://docs.docker.com/compose/install/) (推荐v2.x版本)
- 获取必要的API密钥(OpenAI API等)
## 技术说明
本Docker配置使用了以下技术来确保OWL项目在容器中正常运行:
- **Xvfb**:虚拟帧缓冲区,用于在无显示器的环境中模拟X服务器
- **Playwright**:用于自动化浏览器操作,配置为无头模式
- **共享内存**:增加了共享内存大小,以提高浏览器性能
- **BuildKit**:使用Docker BuildKit加速构建过程
- **缓存优化**:使用持久化卷缓存pip和Playwright依赖
- **跨平台兼容**:提供了适用于Windows和macOS/Linux的脚本
## Docker Compose版本说明
本项目使用的docker-compose.yml文件兼容Docker Compose v2.x版本。如果您使用的是较旧的Docker Compose v1.x版本,可能需要手动添加版本号:
```yaml
version: '3'
services:
# ...其余配置保持不变
```
## 快速开始
### 0. 检查环境
首先,运行检查脚本确保您的环境已准备好:
#### 在macOS/Linux上检查
```bash
# 先给脚本添加执行权限
chmod +x check_docker.sh
# 运行检查脚本
./check_docker.sh
```
#### 在Windows上检查
```cmd
check_docker.bat
```
如果检查脚本发现任何问题,请按照提示进行修复。
### 1. 配置环境变量
复制环境变量模板文件并填写必要的API密钥:
```bash
cp owl/.env_template owl/.env
```
然后编辑 `owl/.env` 文件,填写必要的API密钥,例如:
```
OPENAI_API_KEY=your_openai_api_key
GOOGLE_API_KEY=your_google_api_key
SEARCH_ENGINE_ID=your_search_engine_id
```
### 2. 快速构建Docker镜像
#### 在macOS/Linux上构建
使用提供的Shell脚本,可以加速Docker镜像的构建:
```bash
# 先给脚本添加执行权限
chmod +x build_docker.sh
# 运行构建脚本
./build_docker.sh
```
#### 在Windows上构建
使用提供的批处理文件:
```cmd
build_docker.bat
```
或者使用标准方式构建并启动:
```bash
# 使用BuildKit加速构建
set DOCKER_BUILDKIT=1
set COMPOSE_DOCKER_CLI_BUILD=1
docker-compose build --build-arg BUILDKIT_INLINE_CACHE=1
# 启动容器
docker-compose up -d
```
### 3. 交互式使用容器
容器启动后,会自动进入交互式shell环境,并显示欢迎信息和可用脚本列表:
```bash
# 进入容器(如果没有自动进入)
docker-compose exec owl bash
```
在容器内,您可以直接运行任何可用的脚本:
```bash
# 运行默认脚本
xvfb-python run.py
# 运行DeepSeek示例
xvfb-python run_deepseek_example.py
# 运行脚本并传递查询参数
xvfb-python run.py "什么是人工智能?"
```
### 4. 使用外部脚本运行查询
#### 在macOS/Linux上运行
```bash
# 先给脚本添加执行权限
chmod +x run_in_docker.sh
# 默认使用 run.py 脚本
./run_in_docker.sh "你的问题"
# 指定使用特定脚本
./run_in_docker.sh run_deepseek_example.py "你的问题"
```
#### 在Windows上运行
```cmd
REM 默认使用 run.py 脚本
run_in_docker.bat "你的问题"
REM 指定使用特定脚本
run_in_docker.bat run_deepseek_example.py "你的问题"
```
**可用脚本**:
- `run.py` - 默认脚本,使用OpenAI GPT-4o模型
- `run_deepseek_example.py` - 使用DeepSeek模型
- `run_gaia_roleplaying.py` - GAIA基准测试脚本
## 目录挂载
Docker Compose配置中已经设置了以下挂载点:
- `./owl/.env:/app/owl/.env`:挂载环境变量文件,方便修改API密钥
- `./data:/app/data`:挂载数据目录,用于存储和访问数据文件
- `playwright-cache`:持久化卷,用于缓存Playwright浏览器
- `pip-cache`:持久化卷,用于缓存pip包
## 环境变量
您可以通过以下两种方式设置环境变量:
1. 修改 `owl/.env` 文件
2. 在 `docker-compose.yml` 文件的 `environment` 部分添加环境变量
## 构建优化
本Docker配置包含多项构建优化:
1. **使用国内镜像源**:使用清华大学镜像源加速pip包下载
2. **层优化**:减少Dockerfile中的层数,提高构建效率
3. **缓存利用**:
- 启用pip缓存,避免重复下载依赖包
- 使用Docker BuildKit内联缓存
- 合理安排Dockerfile指令顺序,最大化利用缓存
4. **BuildKit**:启用Docker BuildKit加速构建
5. **持久化缓存**:
- 使用Docker卷缓存pip包(`pip-cache`)
- 使用Docker卷缓存Playwright浏览器(`playwright-cache`)
- 本地缓存目录(`.docker-cache`)
### 缓存清理
如果需要清理缓存,可以使用以下命令:
```bash
# 清理Docker构建缓存
docker builder prune
# 清理Docker卷(会删除所有未使用的卷,包括缓存卷)
docker volume prune
# 清理本地缓存目录
rm -rf .docker-cache
```
## 跨平台兼容性
本项目提供了适用于不同操作系统的脚本:
1. **检查脚本**:
- `check_docker.sh`(macOS/Linux):检查Docker环境
- `check_docker.bat`(Windows):检查Docker环境
2. **构建脚本**:
- `build_docker.sh`(macOS/Linux):构建Docker镜像
- `build_docker.bat`(Windows):构建Docker镜像
3. **运行脚本**:
- `run_in_docker.sh`(macOS/Linux):运行Docker容器中的脚本
- `run_in_docker.bat`(Windows):运行Docker容器中的脚本
这些脚本会自动检测操作系统类型,并使用适当的命令。
## 故障排除
### 容器无法启动
检查日志以获取更多信息:
```bash
docker-compose logs
```
### API密钥问题
确保您已经在 `owl/.env` 文件中正确设置了所有必要的API密钥。
### Docker Compose警告
如果您看到关于`version`属性过时的警告:
```
WARN[0000] docker-compose.yml: the attribute `version` is obsolete
```
这是因为您使用的是Docker Compose v2.x,它不再需要显式指定版本号。我们已经从配置文件中移除了这个属性,所以您不会再看到这个警告。
### 浏览器相关问题
如果遇到浏览器相关的问题,可以尝试以下解决方案:
1. 确保在Docker容器中使用`xvfb-python`命令运行Python脚本
2. 检查是否正确安装了Xvfb和相关依赖
3. 增加共享内存大小(在docker-compose.yml中已设置为2GB)
### 构建速度慢
如果构建速度慢,可以尝试以下解决方案:
1. 确保启用了Docker BuildKit(`DOCKER_BUILDKIT=1`)
2. 确保启用了pip缓存(已在docker-compose.yml中配置)
3. 使用`--build-arg BUILDKIT_INLINE_CACHE=1`参数构建(已在构建脚本中配置)
4. 如果是首次构建,下载依赖包可能需要较长时间,后续构建会更快
### Windows特有问题
如果在Windows上遇到问题:
1. 确保使用管理员权限运行命令提示符或PowerShell
2. 如果遇到路径问题,尝试使用正斜杠(/)而不是反斜杠(\)
3. 如果遇到Docker Compose命令问题,尝试使用`docker compose`(无连字符)
### 内存不足
如果遇到内存不足的问题,可以在 `docker-compose.yml` 文件中调整资源限制:
```yaml
services:
owl:
# 其他配置...
deploy:
resources:
limits:
cpus: '4' # 增加CPU核心数
memory: 8G # 增加内存限制
```
## 自定义Docker镜像
如果需要自定义Docker镜像,可以修改 `Dockerfile` 文件,然后重新构建:
```bash
# macOS/Linux
./build_docker.sh
# Windows
build_docker.bat
``` |