08 2017 档案

hadoop yarn HA集群搭建
摘要：可先完成hadoop namenode HA的搭建：http://www.cnblogs.com/kisf/p/7458519.html 搭建yarnde HA只需要在namenode HA配置基础上修改yarn-site.xml。 1. 修改yarn-site.xml (yarn另一台机器上一定要 阅读全文
posted @ 2017-08-31 19:59 Jenkin.K 阅读(495) 评论(0) 推荐(0)
hadoop namenode HA集群搭建
摘要：hadoop集群搭建(namenode是单点的) http://www.cnblogs.com/kisf/p/7456290.html HA集群需要zk, zk搭建：http://www.cnblogs.com/kisf/p/7357184.html zk可视化管理工具：http://www.cnb 阅读全文
posted @ 2017-08-31 15:31 Jenkin.K 阅读(1010) 评论(0) 推荐(0)
大数据原理学习
摘要：一、Hadoop NameNode 高可用 (High Availability) 实现解析 https://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop-name-node/ 阅读全文
posted @ 2017-08-31 10:24 Jenkin.K 阅读(183) 评论(0) 推荐(0)
hadoop集群搭建
摘要：前置条件：JDK安装，JAVA_HOME配置。 1. 下载 wget https://dist.apache.org/repos/dist/release/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz 2. 解压 配置hadoop home 3. 配置 阅读全文
posted @ 2017-08-31 01:26 Jenkin.K 阅读(397) 评论(0) 推荐(0)
大数据
摘要：Presto yarn hdfs kafaka 消息 kerberos 安全认证 consul zk 阅读全文
posted @ 2017-08-30 15:25 Jenkin.K 阅读(90) 评论(0) 推荐(0)
基于RPC原理的dubbo
摘要：http://www.cnblogs.com/panxuejun/p/6094790.html 阅读全文
posted @ 2017-08-25 18:43 Jenkin.K 阅读(103) 评论(0) 推荐(0)
java的动态代理机制详解
摘要：http://www.cnblogs.com/xiaoluo501395377/p/3383130.html 阅读全文
posted @ 2017-08-25 18:42 Jenkin.K 阅读(105) 评论(0) 推荐(0)
xxxx interview
摘要：1. 什么数据库，做了什么优化？ 回答mysql innodb与myisam区别，根据业务选择引擎。事务，行级锁，全文检索，二级索引。 存储：myisam数据和索引分开存储。innodb数据和索引存储在一起，但主键以外的索引是和数据分开存储的。 2. redis数据结构，如何存储？ http://w 阅读全文
posted @ 2017-08-24 11:54 Jenkin.K 阅读(170) 评论(0) 推荐(0)
mysql创建账号
摘要：1、创建账号1）只读账号GRANT USAGE ON *.* TO 'testgao_r'@'192.168.1.1' IDENTIFIED BY 'password' WITH MAX_QUERIES_PER_HOUR 14400000 MAX_UPDATES_PER_HOUR 7200000 M 阅读全文
posted @ 2017-08-23 18:53 Jenkin.K 阅读(307) 评论(0) 推荐(0)
elasticsearch搜索集群基础架构
摘要：1. elasticsearch cluster搭建 http://www.cnblogs.com/kisf/p/7326980.html 为了配套spring boot，elasticsearch版本使用的是 2.4.6版本。 2. elasticsearch-head搭建 http://www. 阅读全文
posted @ 2017-08-15 16:13 Jenkin.K 阅读(324) 评论(0) 推荐(0)
zookeeper可视化管理工具node-zk-browser安装
摘要：一、安装nodejs 1. 下载 wget https://github.com/joyent/node/archive/v0.10.35.tar.gz 2. 解压 3. 安装依赖 yum -y install gcc-c++ （gcc-c++是否为必须安装，没实验。） （搭建时，nodejs总是出 阅读全文
posted @ 2017-08-15 16:12 Jenkin.K 阅读(6381) 评论(1) 推荐(0)
kafka监控搭建
摘要：1. 下载 wget https://github.com/quantifind/KafkaOffsetMonitor/releases/download/v0.2.1/KafkaOffsetMonitor-assembly-0.2.1.jar 2. 启动脚本 3. 停止脚本 访问：http://1 阅读全文
posted @ 2017-08-15 11:51 Jenkin.K 阅读(286) 评论(0) 推荐(0)
kafka集群安装
摘要：1. 下载 wget http://mirror.bit.edu.cn/apache/kafka/0.10.2.1/kafka_2.12-0.10.2.1.tgz 2. 解压 3. 修改配置文件 vim kafka_2.12-0.10.2.1/config/server.properties 4. 阅读全文
posted @ 2017-08-14 15:12 Jenkin.K 阅读(228) 评论(0) 推荐(0)
zookeeper集群安装
摘要：需要先安装JDK 荐1.8 1. 下载 wget http://apache.stu.edu.tw/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz 2. 解压 tar zxvf zookeeper-3.4.10.tar.gz 3. 修改配置文件 阅读全文
posted @ 2017-08-14 12:48 Jenkin.K 阅读(271) 评论(0) 推荐(0)
elasticsearch 5.5.1 head插件安装
摘要：5.5.1版本与之前版本有很大不同。 1. 下载插件 git clone git://github.com/mobz/elasticsearch-head.git 2. 编译 cd elasticsearch-head npm install npm install grunt --save 3. 阅读全文
posted @ 2017-08-10 10:17 Jenkin.K 阅读(230) 评论(0) 推荐(0)
elasticsearch 5.x集群安装
摘要：1. 下载 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.1.tar.gz 2. 解压 为便于识别，解压后起名 elasticsearch-5.5.1-nodex , elasticsearch 阅读全文
posted @ 2017-08-09 18:24 Jenkin.K 阅读(421) 评论(0) 推荐(0)
Elasticsearch、MongoDB、Hadoop适用场景
摘要：如果你仅仅想要通过关键字和简单的分析，那么Elasticsearch可以完成任务； 如果你需要查询文档，并且包含更加复杂的分析过程，那么MongoDB相当适合； 如果你有一个海量的数据，需要大量不同的复杂处理和分析，那么Hadoop提供了最为广泛的工具和灵活性。 Elasticsearch和Hado 阅读全文
posted @ 2017-08-09 09:24 Jenkin.K 阅读(277) 评论(0) 推荐(0)
mybatis v jpa
摘要：mybatis的优势在于SQL的自由度上，SQL优化和返回对象的大小都是可控的。spring-data-JPA则在开发效率上有优势。 阅读全文
posted @ 2017-08-04 22:55 Jenkin.K 阅读(137) 评论(0) 推荐(0)
REST API Design
摘要： 阅读全文
posted @ 2017-08-03 10:13 Jenkin.K 阅读(95) 评论(0) 推荐(0)