独立服务器部署Python 3.10应用怎样配置生产运行,如何管理依赖与服务

发布人:A5数据发布时间:2026-11-08 10:37阅读量:77

把独立服务器上的 Python 3.10 应用切换到生产运行,目标不是单纯执行一次启动命令,而是让应用拥有可复现的依赖环境、明确的进程托管方式、稳定的外部入口、可追踪的日志以及可执行的回滚路径。比较稳妥的组合是:Python 3.10 虚拟环境负责依赖隔离,Gunicorn 或对应的生产级 ASGI/WSGI 服务负责承载应用,systemd 负责启动与重启,Nginx 负责域名入口和 TLS 证书。

变更实施方案配图

这类变更应避免直接覆盖当前运行目录。先确认操作系统、Python 解释器、应用入口、监听端口和当前配置,再将新版本部署到独立目录,完成依赖安装与本机健康检查,最后才切换服务。下面的示例以使用 systemd 的 Linux 独立服务器为前提,目录、域名和模块名均为示例,需要按照实际应用替换;不会默认认为命令已经在你的服务器上执行成功。

Python 3.10应用的生产运行需要稳定的服务器资源承载进程、依赖和业务数据。A5idc数据提供中国香港、美国、日本等地区的物理服务器,涵盖Xeon Gold、AMD EPYC等平台及SSD、NVMe存储,可为网站、业务后台、接口服务和数据库部署提供不同的硬件与网络资源组合。

一、先确认现状和影响范围

1. 核对操作系统与运行组件

示例以 Ubuntu 22.04、systemd、Nginx 和 Python 3.10 为主要环境。其他发行版可以沿用思路,但包管理器、日志路径、服务默认用户和 Python 安装方式可能不同。

先记录基础信息:

cat /etc/os-release
uname -a
command -v python3.10 || true
python3.10 --version || true
python3.10 -m venv --help >/dev/null && echo "venv available" || echo "venv unavailable"
systemctl --version | head -n 1
nginx -v

重点确认以下内容:

核对项目需要确认的结果未确认时的风险
Python 版本应用明确使用 Python 3.10,而不是误用系统默认 python3依赖安装成功但运行时出现语法或二进制兼容问题
虚拟环境能力python3.10 -m venv 可用依赖可能被装入系统 Python
应用入口例如 myproject.wsgi:application、main:appGunicorn 启动后找不到模块
监听端口例如 127.0.0.1:8000Nginx 转发到错误端口
外部入口域名、DNS 解析、已有 Nginx 配置切换后访问到旧服务或错误站点
配置与密钥数据库、缓存、密钥、第三方接口配置位置新服务启动但无法连接依赖服务
写入目录上传、临时文件、任务输出的实际路径使用低权限用户运行后出现权限错误

如果服务器上已有应用正在运行,还应确认进程和端口:

ps -ef | grep -E 'gunicorn|uvicorn|python' | grep -v grep
sudo ss -ltnp
systemctl list-units --type=service --state=running | grep -Ei 'gunicorn|python|myapp|nginx'

不要仅凭进程名称判断应用归属。应通过 systemctl cat 服务名、启动参数和工作目录确认当前服务使用的是哪个代码版本。

2. 明确本次变更的边界

本次变更建议只包含以下内容:

  • 新建一个 Python 3.10 虚拟环境;
  • 安装已经审核过的依赖版本;
  • 部署新的应用代码;
  • 增加或调整 systemd 服务;
  • 验证本机健康检查;
  • 在必要时切换 Nginx 入口和 HTTPS 配置。

数据库结构迁移、操作系统大版本升级、防火墙策略重写和大规模依赖升级不宜与应用上线放在同一个变更窗口内。特别是数据库迁移,即使应用代码可以回滚,已经执行的结构变更也不一定能安全回退。

二、变更准备:先固定依赖和回滚材料

1. 准备可复现的依赖清单

生产环境不建议直接在当前虚拟环境中执行大量无版本限制的安装命令。至少应固定直接依赖和间接依赖的版本,例如:

Django==4.2.16
gunicorn==22.0.0
psycopg2-binary==2.9.9
redis==5.0.8

更严格的做法是在构建环境生成带哈希的锁定文件,并在服务器安装:

/srv/myapp/releases/20250101/.venv/bin/python -m pip install \
  --require-hashes \
  -r /srv/myapp/releases/20250101/requirements.lock

只有当锁定文件为每个安装包提供了完整哈希时,才能使用 --require-hashes。如果当前项目只有固定版本的 requirements.txt,可以先使用:

/srv/myapp/releases/20250101/.venv/bin/python -m pip install \
  -r /srv/myapp/releases/20250101/requirements.txt

依赖文件应当进入代码仓库或构建产物,生产服务器不应以当前环境的 pip freeze 结果作为唯一依赖来源。依赖升级时,一次只处理一个明确范围,并保留升级前的锁定文件和旧版本代码。

安装完成后执行:

/srv/myapp/releases/20250101/.venv/bin/python -m pip check
/srv/myapp/releases/20250101/.venv/bin/python -m pip list

pip check 通过只能说明已安装包的声明依赖没有明显冲突,不能代替应用启动和接口检查。

2. 规划目录和权限

可以采用“版本目录加当前软链接”的结构,使回滚时只需切换到旧版本:

二、变更准备:先固定依赖和回滚材料配图

/srv/myapp/
├── current -> /srv/myapp/releases/20250101
├── releases/
│   ├── 20241220/
│   └── 20250101/
└── shared/

/etc/myapp/
└── myapp.env

/var/lib/myapp/

代码目录和虚拟环境应尽量由 root 或发布用户维护,运行用户只需要读取权限。应用需要写入的内容,例如上传文件、缓存文件或任务结果,应放在单独的 /var/lib/myapp,不要让应用用户拥有整个代码目录的写权限。

创建运行用户和目录前,先确认服务器没有同名用户和目录。下面的命令会创建系统用户并改变目录所有者,适用于新建服务,不应直接套用到已有应用目录:

id myapp || sudo useradd --system --home-dir /srv/myapp --shell /usr/sbin/nologin myapp

sudo install -d -o root -g myapp -m 0750 /srv/myapp
sudo install -d -o root -g myapp -m 0750 /srv/myapp/releases
sudo install -d -o myapp -g myapp -m 0750 /var/lib/myapp
sudo install -d -o root -g myapp -m 0750 /etc/myapp

如果已有服务使用 myapp 用户,不要重复修改其家目录、组关系或目录权限,先通过 id myapp 和服务配置确认影响范围。

3. 备份现有配置和运行版本

变更前至少保存以下材料:

  • 当前代码版本或当前发布目录;
  • /etc/systemd/system/myapp.service;
  • /etc/myapp/myapp.env;
  • Nginx 站点配置;
  • 当前依赖清单;
  • 与本次版本有关的数据库备份或迁移记录。

备份配置时要注意密钥文件权限,不能把备份文件放到公开目录:

backup_dir="/root/myapp-change-backup-$(date +%Y%m%d-%H%M%S)"
sudo install -d -m 0700 "$backup_dir"

sudo cp -a /etc/systemd/system/myapp.service "$backup_dir/" 2>/dev/null || true
sudo cp -a /etc/myapp/myapp.env "$backup_dir/" 2>/dev/null || true
sudo cp -a /etc/nginx/sites-available/myapp "$backup_dir/" 2>/dev/null || true
sudo readlink -f /srv/myapp/current | sudo tee "$backup_dir/current-release.txt" >/dev/null

如果本次包含数据库迁移,应单独确认备份可恢复,而不是只确认备份命令执行过。数据库回滚条件需要由应用和数据库负责人共同确认。

三、分步实施生产运行环境

1. 创建新版本目录并安装依赖

下面假设已经将经过审核的代码包放在 /tmp/myapp-release,实际生产环境更推荐由构建系统生成压缩包或镜像,再传输到服务器。不要在当前运行目录直接解压覆盖。

release="/srv/myapp/releases/20250101"

sudo install -d -o root -g myapp -m 0750 "$release"
sudo cp -a /tmp/myapp-release/. "$release/"
sudo chown -R root:myapp "$release"

sudo -u root python3.10 -m venv "$release/.venv"
sudo "$release/.venv/bin/python" -m pip install --upgrade "pip==24.0"
sudo "$release/.venv/bin/python" -m pip install \
  -r "$release/requirements.txt"
sudo "$release/.venv/bin/python" -m pip check

pip 版本只是示例,应根据项目兼容性和构建环境确定。若服务器不能访问依赖源,提前在构建环境制作 wheel 包并传输,避免在生产变更过程中临时更换软件源或下载未经审核的依赖。

在安装依赖后,可以先进行不改变外部流量的导入检查:

sudo -u myapp "$release/.venv/bin/python" -c \
  "import myproject; print('application import ok')"

如果是 Django 项目,可以在环境变量已准备好的情况下执行:

sudo -u myapp env PYTHONPATH="$release" \
  "$release/.venv/bin/python" "$release/manage.py" check

如果是 FastAPI、Flask 或其他框架,应使用项目自身的健康检查或最小启动测试。导入检查通过,不代表数据库、缓存、模板和外部接口都可用。

2. 准备生产环境变量

将密钥和连接信息放在独立文件中,不要写入代码仓库,也不要直接拼进 systemd 的命令行。示例:

APP_ENV=production
APP_PORT=8000
SECRET_KEY=replace-with-a-real-secret
DATABASE_URL=replace-with-database-url
REDIS_URL=redis://127.0.0.1:6379/0

创建或更新环境文件时,先确认应用对变量格式的要求。EnvironmentFile 并不等同于完整的 Shell 脚本,复杂的引号、命令替换和多行值应参照 systemd 文档或改用更合适的密钥管理方式。

sudo install -o root -g myapp -m 0640 /tmp/myapp.env /etc/myapp/myapp.env
sudo sed -n '1,20p' /etc/myapp/myapp.env

检查内容时不要把真实密钥复制到工单、聊天记录或终端日志中。如果更换 SECRET_KEY,已有登录会话、签名数据或加密内容可能受到影响;更换数据库密码也需要同步更新数据库侧配置和连接池策略。

3. 用 systemd 托管应用进程

创建 /etc/systemd/system/myapp.service。下面以 Django WSGI 入口为例:

[Unit]
Description=MyApp Python 3.10 application
After=network-online.target
Wants=network-online.target

[Service]
Type=simple
User=myapp
Group=myapp
WorkingDirectory=/srv/myapp/current
EnvironmentFile=-/etc/myapp/myapp.env
Environment=PYTHONUNBUFFERED=1

ExecStart=/srv/myapp/current/.venv/bin/gunicorn \
          --workers 2 \
          --bind 127.0.0.1:8000 \
          --access-logfile - \
          --error-logfile - \
          --timeout 60 \
          --graceful-timeout 30 \
          myproject.wsgi:application

Restart=on-failure
RestartSec=5
TimeoutStopSec=45
UMask=0027
NoNewPrivileges=true
PrivateTmp=true
ProtectSystem=full
ReadWritePaths=/var/lib/myapp
LimitNOFILE=65535

[Install]
WantedBy=multi-user.target

myproject.wsgi:application 必须替换为实际入口。常见形式包括:

  • Flask WSGI:myapp:app 或 myapp:create_app();
  • Django WSGI:config.wsgi:application;
  • FastAPI 等 ASGI 应用:使用 Gunicorn 的 Uvicorn worker,例如 -k uvicorn.workers.UvicornWorker main:app。

工作进程数不能只按 CPU 数量机械设置。2 个 worker 是小型应用的起始示例,实际还要看单个进程内存、请求类型、数据库连接数和并发量。可以用下面的方式估算内存压力:如果每个 worker 常驻约 250 MB,2 个 worker 加主进程、Nginx、系统和缓存可能需要超过 700 MB;在内存较小的服务器上,还应为系统和突发请求留出余量。

如果应用启动后会写入临时文件,ReadWritePaths=/var/lib/myapp 只允许写入指定目录。若应用必须写入其他路径,应先确认业务需求再补充路径,不要为了“先跑起来”而去掉所有保护项。

加载并启动服务:

sudo systemctl daemon-reload
sudo systemctl enable myapp
sudo systemctl start myapp
sudo systemctl status myapp --no-pager

查看服务日志:

sudo journalctl -u myapp -n 100 --no-pager
sudo journalctl -u myapp -f

如果进程无法启动,优先检查入口模块、环境文件、目录权限和依赖冲突,不要反复执行 restart 掩盖首次失败原因。

4. 先做本机健康检查,再接入 Nginx

确认应用仅监听本机地址:

sudo ss -ltnp | grep ':8000'
curl --fail --max-time 5 http://127.0.0.1:8000/healthz

/healthz 是示例路径。如果应用没有健康检查接口,可以使用一个不会触发写入和复杂业务逻辑的只读接口。若返回 404,说明请求已经到达应用,但路径不对;若连接拒绝,通常是服务未启动或监听地址、端口不一致;若超时,应检查应用启动过程、数据库连接和外部依赖。

Nginx 配置示例:

upstream myapp_backend {
    server 127.0.0.1:8000;
    keepalive 16;
}

server {
    listen 80;
    server_name app.example.com;

    location / {
        proxy_pass http://myapp_backend;
        proxy_http_version 1.1;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header X-Forwarded-Proto $scheme;
        proxy_read_timeout 60s;
        proxy_connect_timeout 5s;
    }
}

正式启用前先校验配置:

sudo nginx -t
sudo systemctl reload nginx

如果 Nginx 配置文件有语法错误,不能执行 reload。Nginx reload 失败时,旧配置通常仍在运行,但仍应立即查看错误信息,避免继续修改多个配置文件。

应用框架还需要正确识别反向代理传递的协议和客户端地址。只有在确认请求确实来自受信任的 Nginx 或负载均衡器时,才启用对应框架的 proxy trust 配置,否则可能造成协议判断错误或客户端 IP 被伪造。

5. 配置 HTTPS 和证书续期

证书申请前需要确认:

  • 域名 DNS 已指向当前入口;
  • 80 或 443 端口由预期的 Nginx 实例监听;
  • 证书申请工具的挑战路径不会被应用拦截;
  • 现有证书和 Nginx 配置已经备份。

证书签发后,HTTPS 站点可以使用类似配置:

server {
    listen 443 ssl http2;
    server_name app.example.com;

    ssl_certificate     /etc/letsencrypt/live/app.example.com/fullchain.pem;
    ssl_certificate_key /etc/letsencrypt/live/app.example.com/privkey.pem;

    upstream myapp_backend {
        server 127.0.0.1:8000;
    }

    location / {
        proxy_pass http://myapp_backend;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header X-Forwarded-Proto https;
        proxy_read_timeout 60s;
    }
}

如果还需要将 HTTP 跳转到 HTTPS,应先确认 HTTPS 已经可以正常访问,再增加跳转配置。对于包含多个子域名的站点,不要未经确认就添加 HSTS;一旦浏览器缓存了严格 HTTPS 策略,相关子域名的访问行为也会受到影响。

续期不应只依赖证书申请成功。应确认续期定时器或任务存在,并在测试环境或工具支持的情况下执行演练:

sudo systemctl list-timers | grep -Ei 'cert|acme'
sudo certbot renew --dry-run

如果使用的不是 Certbot,应使用对应工具的续期测试命令。证书更新后通常还需要 reload Nginx,确保进程重新读取新证书。

四、上线后的验证与观察

1. 按入口层次验证

验证顺序应从内到外,避免把多个问题混在一起:

四、上线后的验证与观察配图

  1. 查看 systemd 服务是否处于 active (running);
  2. 请求 127.0.0.1:8000 的健康接口;
  3. 通过 Nginx 的 HTTP 入口请求;
  4. 通过正式域名和 HTTPS 请求;
  5. 检查一个只读业务接口;
  6. 在低风险范围内验证登录、数据库读取和必要的异步任务。

命令示例:

systemctl is-active --quiet myapp && echo "service active"
curl --fail --max-time 5 http://127.0.0.1:8000/healthz
curl --fail --max-time 10 -I https://app.example.com/healthz
curl --fail --max-time 10 https://app.example.com/healthz

应用接口可能要求特定 Host、认证头或 CSRF 配置,不能把所有接口都用匿名 curl 判断。健康接口应尽量返回明确状态,并避免每次检查都执行昂贵的数据库或第三方调用。

2. 观察服务、入口、资源和日志

上线后同时查看应用日志和 Nginx 日志:

sudo journalctl -u myapp --since "10 minutes ago" --no-pager
sudo tail -n 100 /var/log/nginx/access.log
sudo tail -n 100 /var/log/nginx/error.log
df -h
free -m
uptime

建议重点观察以下信号:

观察项正常表现需要处理的信号
服务状态进程持续运行,重启次数没有增加反复启动、退出码异常、OOM
HTTP 状态健康接口和核心只读接口返回预期状态5xx 增长、502、504
延迟与变更前同一时段相比没有明显恶化请求持续超时或延迟翻倍
内存使用量稳定,未持续增长频繁触发交换、内存不足、进程被杀
磁盘日志和上传目录仍有足够空间文件系统接近满载
依赖连接数据库、缓存连接正常连接池耗尽、认证失败、超时
证书域名证书有效且链完整过期、域名不匹配、浏览器报错

应用日志中不要输出密码、完整令牌、数据库连接字符串和用户敏感数据。systemd journal 需要设置合理的保留策略,Nginx 访问日志也应配合 logrotate 或其他日志管理机制,防止磁盘被日志占满。

3. 处理静态文件、上传和长连接差异

如果应用使用 Django、Flask 等框架,静态文件通常不应全部由 Python 进程返回。可以将稳定的静态目录交给 Nginx:

location /static/ {
    alias /var/lib/myapp/static/;
    expires 7d;
    add_header Cache-Control "public";
}

alias 指向的目录必须真实存在,并允许 Nginx 工作用户读取。上传目录不能直接套用长期缓存策略,也不应因为方便而开放目录列表。

如果应用使用 WebSocket、长轮询或流式响应,Nginx 还需要额外的升级头和更长的超时时间;这些参数应根据应用协议配置,不能将普通 HTTP 的 60 秒超时直接用于所有连接。

五、回滚条件和执行方式

1. 预先定义触发条件

回滚不应等到服务器完全不可用才开始。可以在变更单中预先写明以下条件,并结合变更前基线调整阈值:

五、回滚条件和执行方式配图

  • 新版本无法通过本机健康检查;
  • systemd 在观察窗口内连续重启;
  • 入口出现持续 5xx、502 或 504;
  • 核心只读业务失败,且确认与本次代码或依赖有关;
  • 内存、CPU、连接池或磁盘使用量持续超过既定上限;
  • 证书、域名入口或代理头配置错误;
  • 新版本需要的数据库结构尚未完成,继续运行会造成数据写入风险。

单个偶发请求失败不一定需要回滚,但如果错误在多个实例、多个请求或连续时间段内重复出现,就不应仅依靠重启掩盖问题。

2. 回滚应用版本

切换前记录当前版本:

readlink -f /srv/myapp/current

如果旧版本目录仍在,可以将 current 切回旧目录。修改软链接前要确认目标路径正确,避免因变量为空或路径写错影响整个目录:

old_release="/srv/myapp/releases/20241220"

test -d "$old_release"
test -x "$old_release/.venv/bin/gunicorn"

sudo ln -sfn "$old_release" /srv/myapp/current
sudo systemctl restart myapp
sudo systemctl status myapp --no-pager
sudo journalctl -u myapp -n 80 --no-pager

如果新版本同时修改了环境文件或 systemd 配置,应从受保护的备份中恢复对应文件,再执行:

sudo systemctl daemon-reload
sudo systemctl restart myapp

应用代码回滚不等于数据库回滚。如果新版本已经执行了不可逆或不兼容的数据库迁移,应先停止进一步写入,按照数据库恢复方案处理,不能只切换软链接。

3. 回滚 Nginx 或证书配置

Nginx 配置回滚前先使用备份文件恢复,并校验语法:

sudo cp -a /root/myapp-change-backup-YYYYMMDD-HHMMSS/myapp \
  /etc/nginx/sites-available/myapp

sudo nginx -t
sudo systemctl reload nginx

上面的备份目录名必须替换为实际目录。cp 会覆盖目标配置,执行前应确认源文件和目标文件都正确;如果不确定,不要直接运行覆盖命令,而是先用 diff -u 比较:

sudo diff -u \
  /etc/nginx/sites-available/myapp \
  /root/myapp-change-backup-YYYYMMDD-HHMMSS/myapp

证书本身通常不需要随着应用代码回滚,但如果新配置引用了错误路径、错误域名或不兼容的证书,应恢复上一份可用的 Nginx 配置并重新执行 nginx -t。

观察窗口与回滚触发条件

上线后至少安排一个明确观察窗口:低流量应用可先观察 30 分钟,再覆盖一次主要访问时段;有明显业务高峰的应用,应至少观察到下一个高峰周期。期间持续关注 systemd 重启次数、Nginx 5xx、健康接口、核心业务响应、内存、磁盘和依赖连接状态。

观察窗口内如果服务无法稳定运行、核心接口持续报错、资源使用量超过既定上限,或发现数据库结构与旧代码不兼容,应停止继续发布并按已记录的旧版本、环境文件和 Nginx 配置执行回滚。只有在旧版本恢复、健康检查通过、入口请求正常且日志不再出现同类错误后,才结束本次变更。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/8194.html

相关推荐