无名商城论坛

搜索
查看: 240|回复: 0

[其他技术] 【梅开二度】apache airflow高可用安装配置

[复制链接]

1万

主题

1万

帖子

3万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
32464
发表于 2022-5-8 17:20:11 | 显示全部楼层 |阅读模式
airflow 1.10.11 高可用模式安装配置:
总共三台机器三个角色:master1 master2 worker1

# 所有节点安装airflow
    mkdir -p ~/airflow
    export AIRFLOW_HOME=~/airflow
    cd ~/airflow
    python3.6 -m pip install virtualenv
    /usr/local/bin/virtualenv .venv
    source .venv/bin/activate
    pip3.6 install apache-airflow[crypto,password,async,devel,mysql,redis] celery redis
# master2节点安装failover-controller
    pip3.6 install git+
本帖隐藏的内容需要【资源会员】才可浏览,您需要升级才可浏览,点击这里升级【资源会员】
    # 修改默认端口22为指定端口
        vim ./.venv/lib/python3.6/site-packages/scheduler_failover_controller/command_runner/command_runner.py
        34 command_split = [“ssh”, “-tt”, host, base_command]
        36 command_split = [“ssh”, host, base_command]
        改为
        “-p”, “12321”,
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表