活了二十多年,没能为祖国、为人民做点什么,每思及此,伤心欲绝 !

 分类:大数据

hive关联hbase表

hive关联hbase表
Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive ...

柯广 11个月前 (05-25) 3431℃ 0评论 0喜欢

Hive常见问题

Hive常见问题
1. 内存溢出 虚拟内存溢出: Current usage: 1.1gb of 2.0gb physical memory used; 4.6gb of 4.2gb virtual memory used. Killing container.==【即虚拟内存溢出】==; 方法一...

柯广 1年前 (2020-04-14) 4350℃ 0评论 0喜欢

Hive知识点

Hive知识点
hive知识点 工作中hive常用知识点。 Hive简介 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低,可以通过类SQL语句快速实现简单...

柯广 1年前 (2020-04-14) 3021℃ 0评论 0喜欢

第一章——hive入门教程之hello world

第一章——hive入门教程之hello world
1. Hive简介 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专...

柯广 1年前 (2020-04-12) 5975℃ 0评论 0喜欢

hive中orc格式表的数据导入

hive中orc格式表的数据导入
Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive ...

柯广 1年前 (2020-04-12) 4247℃ 0评论 0喜欢

hive常见问题

hive常见问题
1 hiveserver2 不识别udf函数 新写的UDF在hive cli注册以后,无法在hiveserver2远程连接时使用,show functions没有这个函数。 在无法使用UDF的 HiveServer2 上,执行 reload function 命令,将MetaSt...

柯广 2年前 (2019-08-05) 8766℃ 1评论 3喜欢

hive udf 使用方法

hive udf 使用方法
Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive ...

柯广 2年前 (2019-04-08) 2907℃ 0评论 2喜欢

使用scala编写flink消费kafka实时计算pv,uv

使用scala编写flink消费kafka实时计算pv,uv
实时统计pv、uv是再常见不过的大数据统计需求了,前面出过一篇SparkStreaming实时统计pv,uv的案例,这里用flink实时计算pv,uv。 我们需要统计不同数据类型每天的pv,uv情况,并且有如下要求. 每秒钟要输出最新的统计结果 程序永远跑着不会停,所以要定期清...

柯广 2年前 (2019-04-05) 2994℃ 0评论 1喜欢