等待下一个秋

  • Spark
  • Flink
  • Hive
  • 数据仓库
  • 收徒弟
  • Java
    • Spring
    • Mybatis
    • SpringBoot
    • 面试题
  • Python
    • Python基础
    • 爬虫
    • Numpy
    • matplotlib
    • Flask
  • 知识星球
  • 技术杂谈
    • Linux知识
    • Docker
    • Git教程
    • Redis教程
    • mysql
    • 前端
    • R语言
    • 机器学习
  • 其它
    • 副业挣钱
    • 关于我
    • 资料下载
    • 资料文档
未分类
未分类

logstash同步mysql数据到elasticsearch

1. mysql建表test; 2. 安装logstash(跟es版本一致) # 下载 wget https://repo.huaweicloud.com/logstash/7.14.2/logstash-7.14.2-linux-x86_64.tar.gz # 解压 tar -zxvf logstash-7.14.2-linux-x86_64.tar.gz # 需要mysql-connector-java-5.1.40.jar,随便放到比如目录 # /var/lib/hadoop-hdfs/logstash-7.…

2022年7月29日 0条评论 85点热度 0人点赞 等待下一个秋 阅读全文
未分类

elasticsearch修改字段类型

1、原索引 PUT my_index {   "mappings": {     "_doc": {       "properties": {         "create_date": {           "type":   "date",           "format": "yyyy-MM-dd ||yyyy/MM/dd"         …

2022年7月5日 1条评论 145点热度 0人点赞 等待下一个秋 阅读全文
未分类

curl操作elasticsearch常用命令

说明:这些命令针对es7.x,6 以下版本可能无效,elastic 6 / 7不同版本命令差别较大。。 创建索引 这里创建索引名为fc_search,type和data是关键字类型,也就是不进行分词,keyword_1是text类型,默认分词,并且指定分词方式为ik_smart。 curl -u elastic:changeme -X PUT http://192.168.20.130:9200/fc_search -H 'Content-Type: application/json' -d&#…

2022年7月5日 0条评论 123点热度 0人点赞 等待下一个秋 阅读全文
未分类

Elasticsearch修改字段类型

1、原索引 PUT my_index {   "mappings": {     "_doc": {       "properties": {         "create_date": {           "type":   "date",           "format": "yyyy-MM-dd ||yyyy/MM/dd"         …

2022年6月17日 0条评论 215点热度 0人点赞 等待下一个秋 阅读全文
未分类

2021,我这一年

2021,我这平凡的一年。 这一年,说它平凡,一点也不为过。似乎从小到大,我所遭遇的一切事物,都是那么的平平常常。没有大起大落,没有日新月异。或许平静的生活只是外表,而内心则是向往大千世界的。 感叹归感叹,还是总结一下这一年的一些平常琐碎,为接下来的一年做好准备铺垫吧。 1. 写作 今年写作不及往年,尤其不及2019年。是的,今年在坚持这条道路上走的不好,我一直以为这是懒惰,直到后来才醒悟过来,自己的拖延症也很严重。 今年主要强化了一些技术知识,并且写了很多文章,写文章的过程,也是不断成长的过程。因为要想写出一篇被…

2022年1月1日 2条评论 427点热度 0人点赞 等待下一个秋 阅读全文
未分类

Hadoop面试题总结(二)——HDFS

1、 HDFS 中的 block 默认保存几份? 默认保存3份 2、HDFS 默认 BlockSize 是多大? 默认64MB 3、负责HDFS数据存储的是哪一部分? DataNode负责数据存储 4、SecondaryNameNode的目的是什么? 他的目的使帮助NameNode合并编辑日志,减少NameNode 启动时间 5、文件大小设置,增大有什么影响? HDFS中的文件在物理上是分块存储(block),块的大小可以通过配置参数( dfs.blocksize)来规定,默认大小在hadoop2.x版本中是128…

2021年10月11日 0条评论 478点热度 0人点赞 等待下一个秋 阅读全文
未分类

Hadoop面试题(一)

1、集群的最主要瓶颈 磁盘IO 2、Hadoop运行模式 单机版、伪分布式模式、完全分布式模式 3、Hadoop生态圈的组件并做简要描述 1)Zookeeper:是一个开源的分布式应用程序协调服务,基于zookeeper可以实现同步服务,配置维护,命名服务。 2)Flume:一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。 3)Hbase:是一个分布式的、面向列的开源数据库, 利用Hadoop HDFS作为其存储系统。 4)Hive:基于Hadoop的一个数据仓库工具,可以将结构化的数据档映射为一张…

2021年10月11日 0条评论 386点热度 0人点赞 等待下一个秋 阅读全文

等待下一个秋

待我代码写成,便娶你为妻!专注于Hadoop/Spark/Flink/Hive/数据仓库等,关注公众号:大数据技术派,获取更多学习资料。

搜一搜
标签聚合
Java Python 大数据 书籍 R语言 Hive 挣钱 Flink 数据仓库 mysql 算法 Redis
文章归档
  • 2022年7月
  • 2022年6月
  • 2022年5月
  • 2022年4月
  • 2022年3月
  • 2022年2月
  • 2022年1月
  • 2021年12月
  • 2021年11月
  • 2021年10月
  • 2021年9月
  • 2021年8月
  • 2021年6月
  • 2021年5月
  • 2021年4月
  • 2021年3月
  • 2021年2月
  • 2021年1月
  • 2020年12月
  • 2020年11月
  • 2020年10月
  • 2020年9月
  • 2020年8月
  • 2020年7月
  • 2020年5月
  • 2020年4月
  • 2020年1月
  • 2019年9月
  • 2019年8月
  • 2019年7月
  • 2019年6月
  • 2019年5月
  • 2019年4月
  • 2019年3月
  • 2019年1月
  • 2018年12月
  • 2017年5月

©2022 ikeguang.com. 保留所有权利。

鄂ICP备2020019097号-1

鄂公网安备 42032202000160号