等待下一个秋

  • Spark
  • Flink
  • Hive
  • 数据仓库
  • ClickHouse
  • 收徒弟
  • Java
    • Spring
    • Mybatis
    • SpringBoot
    • 面试题
  • Python
    • Python基础
    • 爬虫
    • Numpy
    • matplotlib
    • Flask
  • 技术杂谈
    • Linux知识
    • Docker
    • Git教程
    • Redis教程
    • mysql
    • 前端
    • R语言
    • 机器学习
  • 关于我
  • 其它
    • 副业挣钱
    • 资料下载
    • 资料文档
专注于Hadoop/Spark/Flink/Hive/数据仓库等
关注公众号:大数据技术派,获取更多学习资料。
大数据

Flink实时计算topN热榜

TopN的常见应用场景,最热商品购买量,最高人气作者的阅读量等等。 1. 用到的知识点 Flink创建kafka数据源; 基于 EventTime 处理,如何指定 Watermark; Flink中的Window,滚动(tumbling)窗口与滑动(sliding)窗口; State状态的使用; ProcessFunction 实现 TopN 功能; 2. 案例介绍 通过用户访问日志,计算最近一段时间平台最活跃的几位用户topN。 创建kafka生产者,发送测试数据到kafka; 消费kafka数据,使用滑动(sl…

2021年3月10日 0条评论 2966点热度 0人点赞 等待下一个秋 阅读全文
日记

最近基金亏惨啦!

这是今年以来我的基金收益率,不用说,肯定全国都垫底啦,跑输沪深300五个点多,我也是服了。 但是有一个信念,一直在我的脑海里,它也支撑着我开年以来一直加仓,做了一颗最合格的韭菜。这个信念很多人应该都有:长期看好中国未来经济。 确实是这样的,我是去年2020年春节开始玩儿的基金,大部分时间我的基金里面是有10万块的,不多也不少,跟很多平凡的追梦少年一样,试图通过理财来获得额外的收益,中间经历过大起大落,最终还是挣钱了,去年那走势,基金不挣钱,天理不容。 去年过年前几天,市场很猛,我当时是准备离场的,里面只留了3万元过…

2021年3月5日 1条评论 3313点热度 0人点赞 等待下一个秋 阅读全文
Hive

Hive必会SQL语法explode 和 lateral view

explode 和 lateral view 为什么把这两个放一块呢,因为这两个经常放在一起用啊。 explode与lateral view在关系型数据库中本身是不该出现的,因为他的出现本身就是在操作不满足第一范式的数据(每个属性都不可再分),本身已经违背了数据库的设计原理(不论是业务系统还是数据仓库系统),不过大数据技术普及后,很多类似pv,uv的数据,在业务系统中是存贮在非关系型数据库中,用json存储的概率比较大,直接导入hive为基础的数仓系统中,就需要经过ETL过程解析这类数据,explode与later…

2021年3月4日 0条评论 8440点热度 0人点赞 等待下一个秋 阅读全文
就聊挣钱

这条灰色产业链里,不少人在大把捞金

最近在深入了解新媒体这个行业过程中,越发看到行业的黑暗面。 以短视频行业为例,各种数据造假最严重的。 xx直播带货,在线认识显示31万人,实际上在线人数不足一万人,另外30万哪来的,全靠机器刷。 xx直播带货,号称一晚上卖了一个亿,实际上多少,200万,另外9800万的销售数据哪来的,全靠刷,后台退单率98%。 xx直播带货,抖音3000万粉丝大V,一晚上带货多少,不足一万,终于有数据真实的一个良心大V了。 那些花了上百万坑位费的商家怎么办,哭吧,面对各种虚假数据,面对各种高量退款,面对各种黑暗操作,叫天天不应,叫…

2021年3月1日 1条评论 3452点热度 0人点赞 等待下一个秋 阅读全文

等待下一个秋

待我代码写成,便娶你为妻!专注于Hadoop/Spark/Flink/Hive/数据仓库等,关注公众号:大数据技术派,获取更多学习资料。

搜一搜
标签聚合
R语言 书籍 mysql Python 挣钱 Hive Redis 大数据 Java 算法 Flink 数据仓库
文章归档
  • 2023年2月
  • 2022年12月
  • 2022年11月
  • 2022年9月
  • 2022年7月
  • 2022年6月
  • 2022年5月
  • 2022年4月
  • 2022年3月
  • 2022年2月
  • 2022年1月
  • 2021年12月
  • 2021年11月
  • 2021年10月
  • 2021年9月
  • 2021年8月
  • 2021年6月
  • 2021年5月
  • 2021年4月
  • 2021年3月
  • 2021年2月
  • 2021年1月
  • 2020年12月
  • 2020年11月
  • 2020年10月
  • 2020年9月
  • 2020年8月
  • 2020年7月
  • 2020年5月
  • 2020年4月
  • 2020年1月
  • 2019年9月
  • 2019年8月
  • 2019年7月
  • 2019年6月
  • 2019年5月
  • 2019年4月
  • 2019年3月
  • 2019年1月
  • 2018年12月
  • 2017年5月

©2022 ikeguang.com. 保留所有权利。

鄂ICP备2020019097号-1

鄂公网安备 42032202000160号