数据与智能本公众号关注大数据与人工智能技术。由一批具备多年实战经验的技术极客参与运营管理，持续输出大数据、数据分析、推荐系统、机器学习、人工智能等方向的原创文章，每周至少输出10篇精品原创。同时，...

前言在Hive中，经常会遇到很少数据是JSON格式的，比如：APP页面埋点数据、用户登录日志、点击日志等信息，都会将多个字段存放在一个json数组中，因此，对数据分析时就要用到json相关函数来处理，...

创建mysql表，hive表创建mysql表：createtablepeople(idINT,nameVARCHAR(100),ageINT,salaryintCOMMIT'薪资',a...

数据与智能本公众号关注大数据与人工智能技术。由一批具备多年实战经验的技术极客参与运营管理，持续输出大数据、数据分析、推荐系统、机器学习、人工智能等方向的原创文章，每周至少输出5篇精品原创。同时，我...

文/刘晋，王滨业务背景作业帮是一家以科技为载体的在线教育公司。目前旗下拥有工具类产品作业帮、作业帮口算，K12直播课产品作业帮直播课，素质教育产品小鹿编程、小鹿写字、小鹿美术等，以及喵喵机等智能学习...

自定义函数UDF&UDAF&UDTF①UDF（User-Defined-Function）一进一出自定义UDF:继承GenericUDF，重写evaluate()方法②UDAF（User-Def...

引言与关系型数据库的SQL略有不同，但支持了绝大多数的语句如DDL、DML以及常见的聚合函数、连接查询、条件查询。HIVE不适合用于联机事务处理，也不提供实时查询功能。它最适合应用在基于大量不可变数据...

hive中‘不等于’不管是用！或者<>符号实现，都会将空值即null过滤掉，此时要用where（white_level<>'3'orwhite_levelisnu...

前文我们讲了怎么用Hive的内置函数解析json字符串，不了解的小伙伴可以先看下前文。如何优雅的用Hive处理json格式字符串？文章最后我们遇到了一个问题，Hive的内置函数无法解析json数组字符...

一、Hive的数据存储基于HDFS(Hadoop的数据仓库)没有专门的数据存储格式(默认的情况下采用'\t'(制表符)作为列与列之间的分隔符)存储结构主要包括：数据库，文件，表，视图可以直接加载文本文...