会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
lkoooox
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
下一页
2019年6月21日
大数据学习第15天
摘要: cluster代表一个集群,集群中有多个节点,其中有一个为主节点,这个主节点是可以通过选举产生的,主从节点是对于集群内部来说的。es的一个概念就是去中心化,字面上理解就是无中心节点,这是对于集群外部来说的,因为从外部来看es集群,在逻辑上是个整体,你与任何一个节点的通信和与整个es集群通信是等价的。
阅读全文
posted @ 2019-06-21 20:42 lkoooox
阅读(95)
评论(0)
推荐(0)
2019年6月20日
大数据学习第14天
摘要: redis笔记 String组命令 设置字符串值 set getSET key value [EX seconds] [PX milliseconds] [NX|XX]EX 设置过期时间,秒,等同于SETEX key seconds valuePX 设置过期时间,毫秒,等同于PSETEX key m
阅读全文
posted @ 2019-06-20 20:57 lkoooox
阅读(117)
评论(0)
推荐(0)
大数据学习第13天
摘要: redis学习笔记 伪分布式单节点配置启动sen1.conf port 26379sentinel monitor s1 127.0.0.1 6379 2 sen2.conf port 26380sentinel monitor s1 127.0.0.1 6379 2 sen3.conf port
阅读全文
posted @ 2019-06-20 11:08 lkoooox
阅读(98)
评论(0)
推荐(0)
大数据学习第12天
摘要: package com.bjsxt.mgqq; import java.io.IOException; import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apac
阅读全文
posted @ 2019-06-20 08:41 lkoooox
阅读(114)
评论(0)
推荐(0)
2019年6月19日
大数据学习第11天
摘要: 天气比较代码 package com.bjsxt.weather; import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;
阅读全文
posted @ 2019-06-19 10:03 lkoooox
阅读(137)
评论(0)
推荐(0)
2019年6月15日
大数据学习第10天
摘要: 分布式应用开发,计算向数据移动思路: 1,客户端干了什么 Job 2,框架干了什么 MapTask ReduceTask 3,MR语义: 相同的key作为一组调用一次reduce 相同是由排序保证的 具体的比较方法实现产生不同的排序标准 计算向数据移动(理想状态) 数据本地化读取 public cl
阅读全文
posted @ 2019-06-15 08:54 lkoooox
阅读(170)
评论(0)
推荐(0)
2019年6月14日
大数据学习第9天
摘要: YARN YARN:Yet Another Resource Negotiator; Hadoop 2.0新引入的资源管理系统,直接从MRv1演化而来的; 核心思想:将MRv1中JobTracker的资源管理和任务调度两个功能分开,分别由 ResourceManager和ApplicationMas
阅读全文
posted @ 2019-06-14 14:30 lkoooox
阅读(129)
评论(0)
推荐(0)
2019年6月13日
大数据学习第8天
摘要: hadoop高可用配置 hadoop配置官方文档:http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWithQJM.html hdfs-site.xml配置明细 dfs.n
阅读全文
posted @ 2019-06-13 09:40 lkoooox
阅读(181)
评论(0)
推荐(0)
2019年6月11日
大数据学习第6天
摘要: HDFS安装-完全分布式 1、 先决条件 a) 三台机器(以上) b) 每台机器时间一致,相差30秒以内。 c) 必须有主机名和ip映射。 d) 必须有JDK1.7,并且JDK的环境变量必须配置好。 i. rpm -ivh jdk-7u79-linux-x64.rpm 安装jdk ii. 配置环境变
阅读全文
posted @ 2019-06-11 20:40 lkoooox
阅读(106)
评论(0)
推荐(0)
大数据学习第5天
摘要: 大数据学习第五天 ulimit 查看进程最大文件描述符创建数 -a all详细信息 nginx_config 文件记录 #user nobody ngx_work进程属主 worker_processes 单核进程数 worker_connections 最大连接数 nginx单连接双文件描述符 一
阅读全文
posted @ 2019-06-11 20:35 lkoooox
阅读(225)
评论(0)
推荐(0)
上一页
1
2
3
下一页
公告