摘要: HDFS是Hadoop Distribute File System,翻译成中文就是Hadoop 分布式文件系统,它是Hadoop的核心组成部分,是一个分布式存储服务。 ​HDFS实现了横跨多台计算机进行文件管理的功能,这就为存储和处理超大规模的数据提供所需要的扩展能力。 ​HDFS是分布式文件系统中的一种,广泛应用于大数据。 阅读全文
posted @ 2022-09-11 17:45 帝莘 阅读(198) 评论(0) 推荐(1) 编辑
摘要: 线性表(Linear List)就是数据排成像一条线一样的结构,数据只有前后两个方向,线性表包含四种常见的数据结构,他们分别是:数组,链表,栈,队列。 线性表(Linear List)就是数据排成像一条线一样的结构,数据只有前后两个方向 阅读全文
posted @ 2022-03-09 20:04 帝莘 阅读(64) 评论(0) 推荐(0) 编辑
摘要: 犹记得初相逢,丹心同,年少懵懂。回首处望苍穹,千里共当时明月终。 阅读全文
posted @ 2022-03-05 23:28 帝莘 阅读(838) 评论(2) 推荐(2) 编辑
摘要: 浅谈:redis的主从复制 + 哨兵模式 主从模式 ​ 在谈论redis的主从复制之前,我们先回想下mysql的主从搭建过程,第一步呢首先要在主库服务器中修改my.cnf,开启一下bin_log功能,设置下server-id=1,重启服务后开启一个主从的授权,然后就可以show master sta 阅读全文
posted @ 2022-03-01 19:46 帝莘 阅读(595) 评论(0) 推荐(0) 编辑
摘要: 阳光会变的阴郁 浓缩成泡沫的记忆 打马的青春拥挤 却留下太多的叹息 梦想藏在书本里 标本却倒挂在天际 谎言被写成歌曲 平仄被伪装成可惜 阅读全文
posted @ 2022-01-30 15:47 帝莘 阅读(64) 评论(0) 推荐(1) 编辑
摘要: ES入门三部曲:索引操作,映射操作,文档操作 一、索引操作 1.创建索引库 #语法 PUT /索引名称 { "settings": { "属性名": "属性值" } } #示例 PUT /es_index 说明:settings是索引库的设置,可以定义各种属性,一般可以不填写,直接走默认。 2.判断 阅读全文
posted @ 2022-01-30 09:39 帝莘 阅读(784) 评论(0) 推荐(2) 编辑
摘要: Java实现对ES数据的新增,删除,修改,及合并 新增数据 代码: @Autowired private RestHighLevelClient client; /** * @description ES写入数据 * @author zae * @date 2022/1/13 14:40 * @pa 阅读全文
posted @ 2022-01-14 15:01 帝莘 阅读(6444) 评论(0) 推荐(1) 编辑
摘要: Scala学习笔记(一) 前言:由于最近要整大数据相关的东西,所以java开发的我很苦逼的来学习Scala了,为接下来的工作做知识储备,今天是2021年8月19号,是我接触scala语言的第一天,因此整理一下一天所得,可能比较简单基础,但作为第一次接触而言,算是不少收获了,之后也会在学习的过程中边整 阅读全文
posted @ 2021-08-19 19:27 帝莘 阅读(69) 评论(0) 推荐(0) 编辑
摘要: ES聚合分析 1.metric(指标)聚合 1.1 单值分析 min 求指定字段的最小值 # 求价格的最小值 { "size":0, "aggs":{ "min_price":{ "min":{ "field":"price" } } } } max 求指定字段的最大值 # 求价格的最大值 { "s 阅读全文
posted @ 2021-07-14 18:47 帝莘 阅读(201) 评论(0) 推荐(0) 编辑
摘要: 浅谈:Redis持久化机制(二)AOF篇 ​ 上一篇我们提及到了redis的默认持久化方式RDB,是一种通过存储快照数据方式持久化的机制,它在宕机后会丢失掉最后一次更新RDB文件后的数据,这也是由于它只关注于数据结果导致的。那么我们思考一下,有没有一种方式能够把数据存储、修改、删除这种变化的过程记录 阅读全文
posted @ 2021-06-08 09:48 帝莘 阅读(623) 评论(2) 推荐(1) 编辑