- hive-sql初学遇到的问题
-
1.mapjoin导致内存溢出原因：使用了mapjoin，表数据过大，放在内存join时空间不足导致溢出解决办法：一般行数小于2000行，数据量小于1M，使用mapjoin；增大reduce数量，将...
- 大数据基本操作锦集之Hive的基本操作
-
哈喽，大家好，我是汉斯老师。近几年来，互联网行业由于较高的薪资收入，受到许多人的追捧。很多年轻的学子，或是其他行业的有志青年，都想要投身到这个行业中来。然而一方面受到“互联网寒冬”的影响，最近频频传出...
- 我常用的HIVE调优参数
-
HIVE参数非常多，但是日常使用的就那么几个，我自己常用的有这些，希望和大家多多交流、相互学习1.sethive.exec.parallel=true;开启并行jobsethive.auto.c...
- Hive SQL常用命令总结，大数据开发学习者请按需收藏
-
Hive是基于Hadoop生态的一个重要组件，是对数据仓库进行管理和分析数据的工具。她提供了SQL查询方式来分析存储在HDFS分布式文件系统中的数据，可以将结构化的数据文件映射为一张数据库表，并提供完...
- HiveSQL技术原理、优化
-
-HiveSQL编译成MapReduce过程-编译SQL的任务是在上节中介绍的COMPILER（编译器组件）中完成的。Hive将SQL转化为MapReduce任务，整个编译过程分为六个阶...
- 那些年使用Hive踩过的坑
-
1.概述这个标题也是用血的教训换来的，希望对刚进入hive圈的童鞋和正在hive圈爬坑的童鞋有所帮助。打算分以下几个部分去描述：Hive的结构Hive的基本操作HiveSelectHiveJoin...
- HiveSQL基本操作--实战篇
-
HiveSQL基本操作目录一、Hive数据类型1、基本类型2、复杂类型二、存储格式1、textfile2、SequenceFile3、RCFile4、ORCFile5、Parquet三、操作数据库1、...
- HiveSQL高级进阶技巧案例(中)
-
直接上干货，HiveSQL高级进阶技巧，重要性不言而喻。掌握这10个技巧（中），你的SQL水平将有一个质的提升！1)经纬度计算距离selectt1.uid,t2.uid,t1.latitude,t...
- 98%数据分析面试，都会问到的SQL问题
-
假如你明天就要二面数据分析岗位哪些是你必须要知道的呢？当面试官：SQL的where、distinct都会吗？你可千万不要惊讶因为你可以不会python也可以不会R但你必须要会SQL还不赶紧get起来！...
- 干货!Hive常用10大应用技巧
-
推荐一个数据分析宝藏公众号「小火龙说数据」无广告、无软文、纯干货，更多精彩原创文章与你分享！01Hive运行顺序在应用Hive过程中，你是否有过这样的疑问？「同层查询中，sum/avg聚合后的过滤是...