Hive系列文章
Hive表的基本操作
Hive中的集合数据类型
Hive动态分区详解
hive中orc格式表的数据导入
Java通过jdbc连接hive
通过HiveServer2访问Hive
SpringBoot连接Hive实现自助取数
hive关联hbase表
Hive ...
柯广
11个月前 (05-25) 3431℃ 0评论
0喜欢
1. 内存溢出
虚拟内存溢出:
Current usage: 1.1gb of 2.0gb physical memory used; 4.6gb of 4.2gb virtual memory used. Killing container.==【即虚拟内存溢出】==；
方法一...
柯广
1年前 (2020-04-14) 4350℃ 0评论
0喜欢
hive知识点
工作中hive常用知识点。
Hive简介
hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单...
柯广
1年前 (2020-04-14) 3021℃ 0评论
0喜欢
如果使用java编写mapreduce程序实现wordcount也很简单，如下代码就实现了一个简单的hello world程序：word count。需要的pom.xml依赖
<!-- 版本信息 -->
<properties>
&...
柯广
1年前 (2020-04-12) 2611℃ 0评论
0喜欢
本文目录
一. Sqoop介绍
二. Mysql 数据导入到 Hive
三. Hive数据导入到Mysql
四. mysql数据增量导入hive
1 基于递增列Append导入
1). 创建hive表
2). 创建job
3) 执行job
2 Lastmodified 导...
柯广
1年前 (2020-04-12) 7529℃ 1评论
0喜欢
1. Hive简介
hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专...
柯广
1年前 (2020-04-12) 5975℃ 0评论
0喜欢
Hive系列文章
Hive表的基本操作
Hive中的集合数据类型
Hive动态分区详解
hive中orc格式表的数据导入
Java通过jdbc连接hive
通过HiveServer2访问Hive
SpringBoot连接Hive实现自助取数
hive关联hbase表
Hive ...
柯广
1年前 (2020-04-12) 4247℃ 0评论
0喜欢
1 hiveserver2 不识别udf函数
新写的UDF在hive cli注册以后，无法在hiveserver2远程连接时使用，show functions没有这个函数。
在无法使用UDF的 HiveServer2 上，执行 reload function 命令，将MetaSt...
柯广
2年前 (2019-08-05) 8766℃ 1评论
3喜欢
Hive系列文章
Hive表的基本操作
Hive中的集合数据类型
Hive动态分区详解
hive中orc格式表的数据导入
Java通过jdbc连接hive
通过HiveServer2访问Hive
SpringBoot连接Hive实现自助取数
hive关联hbase表
Hive ...
柯广
2年前 (2019-04-08) 2907℃ 0评论
2喜欢
实时统计pv、uv是再常见不过的大数据统计需求了，前面出过一篇SparkStreaming实时统计pv,uv的案例，这里用flink实时计算pv,uv。
我们需要统计不同数据类型每天的pv，uv情况,并且有如下要求.
每秒钟要输出最新的统计结果
程序永远跑着不会停,所以要定期清...
柯广
2年前 (2019-04-05) 2994℃ 0评论
1喜欢
最近有个需求，实时统计pv,uv，结果按照date,hour,pv,uv来展示，按天统计，第二天重新统计，当然了实际还需要按照类型字段分类统计pv,uv,比如按照date,hour,pv,uv,type来展示。这里介绍最基本的pv,uv的展示。
id
uv
pv
date
...
柯广
2年前 (2019-03-26) 2013℃ 0评论
1喜欢
