让人焦虑和烦恼的,不是累,更不是忙,而是没有特别感兴趣的事,没有特别爱的人。知道自己该努力了,却不知道努力的方向! 而大多数人寻找的是又能赚钱,又感兴趣,又能获得满足感,这三者的交集。所以有人终身都找不到,每天处在焦虑和选择之间徘徊不定!

2021-01-18 0条评论 4169点热度 0人点赞 柯广 阅读全文

最近有好多小伙伴问我,怎么购买比特币、狗狗币等,不为赚钱,就是玩儿。 是的,赚钱那么那么简单,赚钱的永远是少数。可以少投一点,买个几十块啥的,亏了不心疼,可以与全球的小伙伴一起参与一个大项目——炒币,形成共识,达成信仰。 步骤很简单,大概就是下载个APP——欧易okex,然后充usdt币,然后使用usdt币进行购买比特币,狗狗币等。 为什么要充值usdt币,举个例子吧,你去美国旅游,得使用美元支付,你得先把人民币兑换成美元,然后才能在美国各个地方消费。 1. 下载 欧易okex APP 可以使用手机、电脑下载都行,…

2021-01-16 0条评论 150点热度 0人点赞 柯广 阅读全文

Spark内核概述 Spark内核泛指Spark的核心运行机制,包括Spark核心组件的运行机制、Spark任务调度机制、Spark内存管理机制、Spark核心功能的运行原理等,熟练掌握Spark内核原理。 一、Spark核心组件回顾 Driver Spark驱动器节点,用于执行Spark任务中的main方法,负责实际代码的执行工作。Driver在Spark作业执行时主要负责: 1、将用户程序转化为任务(Job); 2、在Executor之间调度任务(task); 3、跟踪Executor的执行情况; 4、通过UI…

2021-01-14 0条评论 4425点热度 0人点赞 柯广 阅读全文

抽样 抽样在Hive 中也是比较常用的一种手段,主要用在下面的几个场景中 一些机器学习的场景中,数仓作为数据的提供方提供样本数据 数据的计算结果异常或者是指标异常,这个时候如果我们往往需要确认数据源的数据是否本身就有异常 SQL的性能有问题的时候我们也会使用抽样的方法区查看数据,然后进行SQL调优 在大规模数据量的数据分析及建模任务中,往往针对全量数据进行挖掘分析时会十分耗时和占用集群资源,因此一般情况下只需要抽取一小部分数据进行分析及建模操作。 随机抽样(rand()函数) 我们一般情况下是使用排序函数和rand…

2021-01-13 0条评论 4339点热度 0人点赞 柯广 阅读全文

5月13日,埃隆·马斯克透露,在比特币挖矿变得更加环保之前,特斯拉将不再接受任何比特币支付,这给整个加密货币市场带来了冲击。 马斯克指出,在特斯拉等待比特币转向可再生能源的同时,公司将关注“其他加密货币”,这些加密货币每笔交易的能耗不到比特币的1%。 特斯拉和比特币 ——埃隆·马斯克(@elonmusk) 2021年5月12日 这条推文让许多加密货币社区陷入狂热的猜测,猜测特斯拉还可能探索哪些加密货币。 社交影响者“The Cryptic Poet”告诉他的4.5万名推特粉丝,他预测特斯拉将“使用ETH或XRP”,…

2021-01-13 0条评论 106点热度 0人点赞 柯广 阅读全文

写一个长一点的狗狗币文章吧,主要是自己看看。 首先说结论,我认为狗狗币就是马斯克的个人股票,然后有可能会涨到8美金-10美金以上,市值超过比特币。 2个月前如果有人和我说狗狗币要涨到1美元,我都会觉得这个人疯了,就是个fomo的韭菜盘。 但是中间我研究了很多马斯克的生平事迹,又结合他和比特币,狗狗币的这一系列动作,整理了一下时间轴,发现这个异想天开的想法居然有一定的道理,一切从动机,历史重复等上都有充分的支撑。 当然这一切也可能只是我的一场臆想,或者阴谋阳谋论,你可以选择相信或者不相信,这都无所谓,我这篇分析和其他…

2021-01-12 0条评论 119点热度 0人点赞 柯广 阅读全文

我来个简单粗暴的回答。 如果你经过自己的努力,成功圈了一波粉丝,跟粉丝互动不错,赚钱途径通常是有这些的。 赞赏,如果你文章写的好,读者会给你赞赏,通常赞赏的人很少,毕竟非亲非故的,除非你写的特别好,也可能一千个人,有一个人给你赞赏就算不错了! 文章后面的广告卡片,这个广告卡片读者点击了会有几毛到几块不等的收益,点击的人也很少,广告卡片的广告类型是可以通过后台调整的,建议每隔一段时间换一下广告类型,读者都看腻了同样类型的广告。这个收益很少,可以忽略不记。 返佣商品,有些公众号会在文章里面插入一些商品卡片,读者点击后产…

2021-01-10 0条评论 4527点热度 0人点赞 柯广 阅读全文

Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive udf 使用方法 Hive基于UDF进行文本分词 Hive窗口函数row number的用法 数据仓库之拉链表 1. 创建表 create table语句遵从sql语法习惯,只不过Hive的语法更灵活。例如,可以定义表的数据文件存储位置,使用…

2021-01-10 0条评论 4554点热度 0人点赞 柯广 阅读全文

关注公众号:Java大数据与数据仓库,学习大数据技术。 一直想写一篇介绍设计模式的文章,让读者可以很快看完,而且一看就懂,看懂就会用,同时不会将各个模式搞混。自认为本文还是写得不错的???,花了不少心思来写这文章和做图,力求让读者真的能看着简单同时有所收获。 设计模式是对大家实际工作中写的各种代码进行高层次抽象的总结,其中最出名的当属 Gang of Four (GoF) 的分类了,他们将设计模式分类为 23 种经典的模式,根据用途我们又可以分为三大类,分别为创建型模式、结构型模式和行为型模式。 有一些重要的设计原…

2021-01-10 0条评论 4488点热度 0人点赞 柯广 阅读全文

row_number 前面我们介绍窗口函数的时候说到了窗口函数的使用场景,我们也给它起了一个名字进行区分,通用窗口函数和特殊窗口函数,今天我们就来看一下排序相关的窗口函数,因为是窗口函数,并且我们说它是用来排序的,我们大概也能猜到它就是用来对窗口内的数据进行排序的 其实关于排序我们前面也介绍过order by,sort by 等排序的方式Hive语法之常见排序方式,为什么还有窗口函数进行排序的,因为前面的order by,sort by 等虽然可以排序但是不能给我们返回排序的值(名次),如果你用过mysql 的话,…

2021-01-07 0条评论 4640点热度 0人点赞 柯广 阅读全文

Hive 中的四种排序 排序操作是一个比较常见的操作,尤其是在数据分析的时候,我们往往需要对数据进行排序,hive 中和排序相关的有四个关键字,今天我们就看一下,它们都是什么作用。 数据准备 下面我们有一份温度数据,tab 分割 2008 32.0 2008 21.0 2008 31.5 2008 17.0 2013 34.0 2015 32.0 2015 33.0 2015 15.9 2015 31.0 2015 19.9 2015 27.0 2016 23.0 2016 39.9 2016 32.0 建表加载数…

2021-01-06 0条评论 4734点热度 0人点赞 柯广 阅读全文

题外话:本来想跟同学去外滩跨年,感受刀子般的凛风带来的肉体上的刺激,可是一个同学说他还在穿秋天的衣服,没有衣服穿不敢出门,怕被冻死。shit,真扫兴,这傻*。所以下班点我坐在座位上,上了会网,突然产生了一个很有价值的想法,我激动的站了起来,结果发现办公室已经没人了,早都下班回家了,我就关了空调和灯,回家了。 本来是不打算做年终总结的,因为一年过的很快,就会有一种经常做年终总结的感觉。看到大佬们都在做总结,我也东施效颦,毕竟生活需要仪式感。预计花费30分钟写完本文。 2020年终于过去了,时间过得很快,一切都在变,不…

2020-12-31 0条评论 5052点热度 0人点赞 柯广 阅读全文

Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive udf 使用方法 Hive基于UDF进行文本分词 Hive窗口函数row number的用法 数据仓库之拉链表 本文大纲 UDF 简介 Hive作为一个sql查询引擎,自带了一些基本的函数,比如count(计数),sum(求和),有时候这些基…

2020-12-30 0条评论 4966点热度 0人点赞 柯广 阅读全文

刀光剑影江湖情,摧枯拉朽浪滔滔。功名利禄拂衣去,山高水远路迢迢。 数据湖初识 近两年,为什么都开始谈论起 Data Lake 这个”新名词”了? 先说说我的想法,其实还是用户需求驱动数据服务,大家开始关注 Data Lake 的根本原因是用户需求发生了质变,过去的数据仓库模式以及相关组件没有办法满足日益进步的用户需求。 数据湖概念的诞生,源自企业面临的一些挑战,如数据应该以何种方式处理和存储。最开始,企业对种类庞杂的应用程序的管理都经历了一个比较自然的演化周期。 那么到底是什么样的需求和挑战驱动了技术的变革,从而导…

2020-12-25 0条评论 5101点热度 0人点赞 柯广 阅读全文

Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive udf 使用方法 Hive基于UDF进行文本分词 Hive窗口函数row number的用法 数据仓库之拉链表 动态分区调整 动态分区属性:设置为true表示开启动态分区功能(默认为false)hive.exec.dynamic.partit…

2020-12-23 1条评论 5340点热度 0人点赞 柯广 阅读全文
1234517