IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> PHP知识库 -> 修改Apache-airflow2.1.3执行时区到上海 -> 正文阅读

[PHP知识库]修改Apache-airflow2.1.3执行时区到上海

准备

使用anaconda安装py3.7,并将airflow一切依赖等准备好,使用pip命令安装airflow,在这里不做过多阐述。
另外笔者使用的是mysql5.7版本,redis5.0版本,在airflow中配置的是CeleryExcutor,mysql该版本不支持timezone敏感,所以需要注意!

修改代码位置

conda默认安装位置在anaconda的对应env里,下面以我自己的路径做记录。

#该路径为安装airflow路径
cd /root/anaconda3/envs/af/lib/python3.7/site-packages/airflow

修改sqlalchemy.py

借鉴在当前目录下的settings.py里对于timezone的导入,将其他涉及TIMEZONE的代码进行调整。

vim utils/sqlalchemy.py 
#在35行后面加入下面的代码
try:
    tz = conf.get("core", "default_timezone")
    if tz == "system":
        utc = pendulum.tz.local_timezone()
    else:
        utc = pendulum.tz.timezone(tz)
except Exception:
    pass
log.info("Configured default timezone %s", utc)

为了启动airflow时观察是否将timezone修改成功,加入log.info("Configured default timezone %s", utc)一行日志代码,后续修改中也会加入,不做重复阐述。

修改timezone.py

修改两处代码

vim utils/timezone.py
#在29行加入以下代码块
log = logging.getLogger(__name__)
try:
   tz = conf.get("core", "default_timezone")
   if tz == "system":
       utc = pendulum.tz.local_timezone()
   else:
       utc = pendulum.tz.timezone(tz)
except Exception:
    pass
log.info("Configured default timezone %s", utc)
#导入相关依赖 插入到26行即可
from airflow.configuration import AIRFLOW_HOME, WEBSERVER_CONFIG, conf
import logging
from airflow.logging_config import configure_logging
#将原62行代码调用修改
#修改前
 result = dt.datetime.utcnow()
 result=  dt.datetime.now()

修改airflow.cfg

切回$AIRFLOW_HOME,然后修改其cfg文件,否则无法触发手动trigger调度。[scheduler]中将allow_trigger_in_future配置置为True即可。

[core]
default_timezone = Asia/Shanghai
[scheduler]
allow_trigger_in_future = True
  PHP知识库 最新文章
Laravel 下实现 Google 2fa 验证
UUCTF WP
DASCTF10月 web
XAMPP任意命令执行提升权限漏洞(CVE-2020-
[GYCTF2020]Easyphp
iwebsec靶场 代码执行关卡通关笔记
多个线程同步执行,多个线程依次执行,多个
php 没事记录下常用方法 (TP5.1)
php之jwt
2021-09-18
上一篇文章      下一篇文章      查看所有文章
加:2021-09-04 17:17:00  更:2021-09-04 17:17:53 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/15 10:26:11-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码