变更内容: - 在 `Dockerfile` 和 `docker-compose.yml` 中添加 Worker 模式支持,包含运行模式 `RUN_MODE` 的配置。 - 更新 API 路由,改为将任务入队处理,并由 Worker 执行。 - 在 JobManager 中新增任务队列及分布式锁功能,支持任务的入队、出队、执行控制以及重试机制。 - 添加全局并发控制逻辑,避免任务超额运行。 - 扩展单元测试,覆盖任务队列、锁机制和并发控制的各类场景。 - 在 Serverless 配置中分别为 API 和 Worker 添加独立服务定义。 提升任务调度灵活性,增强系统可靠性与扩展性。
44 lines
1.1 KiB
Docker
44 lines
1.1 KiB
Docker
FROM python:3.11-slim
|
||
|
||
WORKDIR /app
|
||
|
||
# 安装系统依赖
|
||
RUN apt-get update && apt-get install -y --no-install-recommends \
|
||
gcc \
|
||
&& rm -rf /var/lib/apt/lists/*
|
||
|
||
# 复制依赖文件
|
||
COPY requirements.txt .
|
||
COPY requirements-dev.txt .
|
||
|
||
# 安装 Python 依赖
|
||
RUN pip install --no-cache-dir -r requirements.txt
|
||
RUN pip install --no-cache-dir -r requirements-dev.txt
|
||
|
||
# 复制应用代码和配置
|
||
COPY src/ ./src/
|
||
COPY config/ ./config/
|
||
COPY pyproject.toml .
|
||
|
||
# 安装包(使用 editable 模式)
|
||
RUN pip install --no-cache-dir -e .
|
||
|
||
# 创建非 root 用户
|
||
RUN useradd -m -u 1000 appuser && chown -R appuser:appuser /app
|
||
USER appuser
|
||
|
||
# 暴露端口
|
||
EXPOSE 8000
|
||
|
||
# 运行模式:api(默认)或 worker
|
||
ENV RUN_MODE=api
|
||
|
||
# 健康检查(仅对 API 模式有效)
|
||
HEALTHCHECK --interval=30s --timeout=3s --start-period=5s --retries=3 \
|
||
CMD if [ "$RUN_MODE" = "api" ]; then python -c "import urllib.request; urllib.request.urlopen('http://localhost:8000/healthz')"; else exit 0; fi
|
||
|
||
# 启动脚本
|
||
COPY --chown=appuser:appuser deployment/entrypoint.sh /app/entrypoint.sh
|
||
RUN chmod +x /app/entrypoint.sh
|
||
|
||
CMD ["/app/entrypoint.sh"] |