IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> Shell脚本循环拼接SQL执行示例 -> 正文阅读

[大数据]Shell脚本循环拼接SQL执行示例

作者:recommend-item-box-tow
#!/bin/bash
#******************************************************************************
#所属主题: 支付主题域
#功能描述: 每月更新全量视图,每月运行,传入参数第一开始年月,第二结束年月,例如[202103,202111]
#创建者 : 
#创建日期: 2021-11-22
#修改日期: 
#修改人:
#修改内容:
#******************************************************************************
TABLES=(
ods_pay1
ods_pay2
ods_pay3
ods_pay4
)

start_date=${1}"01"
end_date=${2}"01"

function main(){
    if [ $# -lt 2 ] ; then
        printf "Please enter  two parameters.\n";
        printf "Usage: $0 start_date end_date\n";
        exit 1
    fi
    
    for table in ${TABLES[*]}
    do
        SQL="create or replace view ods.${table}_v as"
        
        local start_date_tmp=${start_date}
        while [[ "$start_date_tmp" -le "$end_date" ]] ;
        do
          month=`date -d "${start_date_tmp}" +%Y%m`
          #s_ai_ask_info_list+=(${table}_${month})
          
          SQL="${SQL} select * from ods.${table}_${month} union all"
          
          start_date_tmp=$(date -d "${start_date_tmp}+1months" +%Y%m%d)
        done
        
        SQL=${SQL%union all*} #删除最后的union all
        
        hive -n ${username} -p ${password} -u jdbc:hive2://hadoop01:10000/ods  -e "${SQL}"
    done
}

main "$@"
  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2021-11-23 12:26:02  更:2021-11-23 12:28:34 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 9:03:01-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码