Hive SQL
0 人感兴趣 · 12 次引用
- 最新
- 推荐
hive etl 通过 ETL 导出 Hive 中的数据
Hive 数据如何导出到关系型数据库中，ETL 导出 Hive 数据
大数据培训：HiveSQL 技术优化与面试
当只有一个distinct字段时，如果不考虑Map阶段的Hash GroupBy，只需要将GroupBy字段和Distinct字段组合为map输出key，利用mapreduce的排序，大数据培训同时将GroupBy字段作为reduce的key，在reduce阶段保存LastKey即可完成去重:
Hive SQL 底层执行原理
本文结构采用宏观着眼，微观入手，从整体到细节的方式剖析 Hive SQL 底层原理。第一节先介绍 Hive 底层的整体执行流程，然后第二节介绍执行流程中的 SQL 编译成 MapReduce 的过程，第三节剖析 SQL 编译成 MapReduce 的具体实现原理。
大数据开发之 Hive SQL 的优化分享
hive的优化主要分为：配置优化、SQL语句优化、任务优化等方案。 其中在开发过程中主要涉及到的可能是SQL优化这块。 优化的核心思想是： 减少数据量（例如分区、列剪裁）； 避免数据倾斜（例如加参数、Key打散）； 避免全表扫描（例如on添加加上分区等
大数据开发之 Hive SQL 内置函数
Hive内部提供了很多函数给开发者使用，包括数学函数，集合函数，大数据培训类型转换函数，日期函数，条件函数，字符函数，聚合函数，表生成函数等等，这些函数都统称为内置函数。
hive 窗口函数 / 分析函数详细剖析
在sql中有一类函数叫做聚合函数,例如sum()、avg()、max()等等,这类函数可以将多行数据按照规则聚集为一行,一般来讲聚集后的行数是要少于聚集前的行数的。但是有时我们想要既显示聚集前的数据,又要显示聚集后的数据,这时我们便引入了窗口函数。窗口函数又叫OL
