IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 游戏开发 -> 大数据之Hive:parse_url、parse_url_tuple函数 -> 正文阅读

[游戏开发]大数据之Hive:parse_url、parse_url_tuple函数

前言

parse_url、parse_url_tuple 是hive内置函数,可以解析URL,区别在于,parse_url一次只能输出一个值,parse_url_tuple 可以输出多个值,parse_url_tuple 函数可以和LATERAL VIEW 搭配使用;

一、parse_url ()

解析URL字符串,partToExtract的选项包含[HOST,PATH,QUERY,REF,PROTOCOL,FILE,AUTHORITY,USERINFO]。
【host,path,query,ref,protocol,file,authority,userinfo】这些可以理解为关键字 通过关键字可以获得url中对应的字段数据
示例1:

select parse_url('https://www.baidu.com/hzy?user_id=10000&platform=ios','PROTOCOL');--https
select parse_url('https://www.baidu.com/hzy?user_id=10000&platform=ios','HOST');--www.baidu.com
select parse_url('https://www.baidu.com/hzy?user_id=10000&platform=ios','PATH');--/hzy
select parse_url('https://www.baidu.com/hzy?user_id=10000&platform=ios','QUERY');--user_id=10000&platform=ios
select parse_url('https://www.baidu.com/hzy?user_id=10000&platform=ios','QUERY','user_id');--10000
select parse_url('https://www.baidu.com/hzy?user_id=10000&platform=ios','QUERY','platform');--ios
select parse_url('user_id=10000&platform=ios','QUERY');--null

示例2:

select parse_url(concat('https://www.baidu.com/?','user_id=10000&platform=ios'),'QUERY','user_id');--10000
select parse_url(concat('https://www.baidu.com/?','user_id=10000&platform=ios'),'QUERY','platform');--ios

二、parse_url_tuple()

语法: parse_url(string urlString, string partToExtract [, string keyToExtract]),parse_url_tuple功能类似parse_url(),但它可以同时提取多个部分并返回
    返回值: string
    说明:返回URL中指定的部分。partToExtract的有效值为:HOST, PATH, QUERY, REF, PROTOCOL, AUTHORITY, FILE, and USERINFO.
示例1:

select parse_url_tuple("http://www.baidu.com/find?cookieid=4234234234",'HOST','PATH','QUERY','QUERY:cookieid');
--c0 c1 c2 c3 
--www.baidu.com /find cookieid=4234234234 4234234234

示例2:

with temp as
    (select "https://www.baidu.com/hzy?user_id=10000&platform=ios" as url )
--select * from temp;
SELECT b.*
FROM temp
LATERAL VIEW parse_url_tuple(url, 'HOST', 'PATH', 'QUERY', 'QUERY:user_id', 'QUERY:platform') b
as host, path, query, user_id ,platform;
--host path query user_id  platform
--www.baidu.com /hzy user_id=10000&platform=ios 10000 ios

参考链接:https://blog.csdn.net/zengxianglei/article/details/89969144

  游戏开发 最新文章
6、英飞凌-AURIX-TC3XX: PWM实验之使用 GT
泛型自动装箱
CubeMax添加Rtthread操作系统 组件STM32F10
python多线程编程:如何优雅地关闭线程
数据类型隐式转换导致的阻塞
WebAPi实现多文件上传,并附带参数
from origin ‘null‘ has been blocked by
UE4 蓝图调用C++函数(附带项目工程)
Unity学习笔记(一)结构体的简单理解与应用
【Memory As a Programming Concept in C a
上一篇文章      下一篇文章      查看所有文章
加:2022-04-01 23:44:41  更:2022-04-01 23:46:44 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2025年1日历 -2025/1/16 18:54:57-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码