2020年4月21日

airflow 分布式部署讨论

摘要： 楼主在这整了一段时间，部署了一个airflow分布式部署。两台机器 一个scheduler worker 另外一个worker；正常启动安装两台在相同用户相同路径下相同版本的airflow数据库使用mysql、消息broker使用redis，backend使用mysql；注意要点：时区、页面缓存、双 阅读全文

posted @ 2020-04-21 00:51 Zhearts 阅读(1011) 评论(5) 推荐(0) 编辑

airflow worker 出现 (2006, 'MySQL server has gone away')以及raise AirflowException('Celery command failed')airflow 设置分布式部署主从worker不能协调运行

摘要： OperationalError: (_mysql_exceptions.OperationalError) (2006, 'MySQL server has gone away')[SQL: SELECT celery_taskmeta.id AS celery_taskmeta_id, cele 阅读全文

posted @ 2020-04-21 00:27 Zhearts 阅读(911) 评论(1) 推荐(0) 编辑

导航