Linux怎么安装Apache Airflow

雨晨大大_8643

雨晨大大_8643

2026-06-20

889人浏览

原创

直接用 pip install apache-airflow 安装后大概率无法运行,因缺依赖、sqlite 版本低、未初始化数据库及环境变量配置错误;airflow 2.4+ 的 standalone 模式最省事,自动启动 web server、scheduler、sqlite db 并创建默认管理员用户,仅需 python 3.8+、pip ≥ 21.3 及 sqlite3 ≥ 3.15.0。

linux怎么安装apache airflow

直接用 pip install apache-airflow 能装上,但大概率跑不起来——缺依赖、SQLite 版本太低、数据库没初始化、环境变量没设对,全是坑。

为什么 standalone 模式最省事(尤其新手)

Airflow 2.4+ 自带 airflow standalone 命令,它会自动拉起 Web Server + Scheduler + SQLite DB + 默认管理员用户,全程不用手动配库、建表、设密码。

  • 前提:Python 3.8+、pip ≥ 21.3、系统有 sqlite3(版本 ≥ 3.15.0,Ubuntu 20.04+/CentOS 8+ 一般自带)
  • 执行:pip install apache-airflow → airflow standalone
  • 它会在当前目录生成 airflow.cfg 和 airflow.db,首次运行会自动创建 admin 用户(用户名/密码都是 admin)
  • 访问 http://localhost:8080 就能进 UI,不用再单独启 webserver 或 scheduler

用 MySQL 时必须提前装好 client 驱动

如果想把 sql_alchemy_conn 改成 MySQL(比如 mysql+pymysql://airflow:airflow@localhost:3306/airflow),光装 apache-airflow[mysql] 不够,还得确保底层 Python 能连 MySQL。

Linux installer
Linux installer

先解析安全源,运行本地CLI安装、启动、卸载Linux桌面应用。用户请求时使用。

下载
  • 先装系统级依赖:yum install mysql-devel(CentOS/RHEL)或 apt-get install libmysqlclient-dev(Ubuntu/Debian)
  • 再装 Python 驱动:pip install pymysql(推荐)或 mysqlclient(C 扩展,性能略好但编译易失败)
  • 验证:python -c "import pymysql; print(pymysql.VERSION)" 不报错才算通
  • 注意:MySQL 用户必须有 CREATE 权限,否则 airflow db init 会卡在建表

virtualenv 是底线,别用 root pip install

全局 pip install 容易污染系统 Python,后续升级/降级 Airflow 会冲突,而且 AIRFLOW_HOME 权限容易出问题。

  • 正确姿势:python -m venv ~/airflow-venv → source ~/airflow-venv/bin/activate
  • 设环境变量必须在激活后:export AIRFLOW_HOME=~/airflow(路径不能有空格、中文、软链)
  • airflow db init 必须在 AIRFLOW_HOME 目录下执行,否则会初始化到默认路径(比如 /root/airflow)
  • 如果之前装过 Airflow,先 pip uninstall apache-airflow,再删掉 AIRFLOW_HOME 下的 airflow.db 和 logs/ 目录,不然配置改了也无效

常见启动失败原因和对应检查点

跑 airflow webserver 或 airflow standalone 报错,90% 出在这几处:

  • ModuleNotFoundError: No module named 'pymysql' → 没装驱动,或装在系统 Python 里,而 virtualenv 里没装
  • airflow.exceptions.AirflowConfigException: error: sqlite C library version too old → 系统 sqlite3 太老,得源码编译升级(CentOS 7 默认是 3.7.17,必须升到 3.15+)
  • Web 页面打不开,但进程在跑 → 检查 airflow.cfg 里 web_server_host 是否设为 0.0.0.0(默认是 localhost,外网访问不了)
  • airflow db init 卡住不动 → MySQL 连接串写错(比如端口不对、用户密码错)、或数据库没创建、或防火墙拦了 3306

真正麻烦的不是装,是装完发现 airflow.cfg 里一堆参数要调、SQLAlchemy 连接要验、时区要改、DAG 文件夹权限要设——这些全得动手试,没法靠一键脚本兜底。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux apache

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3930

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3373

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2533

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6110

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

5742

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3373

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

2865

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3099

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习