xiaojiayu0011

hadoop2.0

摘要： 1.HDFS存在的问题(增加节点数提高稳定性): a.NameNode单点故障,会难以应用于在线场景 HA b.NameNode压力过大,且内存受限,影响系统扩展性 NN联邦(每个NN都维护自己的文件系统,共用一套DN)2.HDFS解决故障方案,通过共享文件夹集群,来维持NameNode稳定 3.HA分布式集群方案如下：(stop-dfs.sh先关闭旧的hadoop集群... 阅读全文

posted @ 2018-03-06 18:15 xiaojiayu0011 阅读(99) 评论(0) 推荐(0)

高并发

摘要： 1.大数据:高并发 ->日志->分析行为->画像？？->推荐->服务书:淘宝十年2.处理高并发: 四层:lvs(只转发、关注port，状态)：快：应付更大的流量 tcp/ip协议七层:nginx(关心socket对应关系):慢于四层:分发客户端的请求 osi参考模型3.tcp：三次握手->传输数据->四次分手 4.查看ip连接情况(传输层)：ne... 阅读全文

posted @ 2018-03-06 18:13 xiaojiayu0011 阅读(107) 评论(0) 推荐(0)

shell 编程

摘要： 1.执行bash脚本四种方式 source aa.sh 当前线程执行 . aa.sh 当前线程执行 bash aa.sh 开启新线程执行(export) ./aa.sh 当前线程shell脚本 &后台执行文件头部加 #!/bin/bash，然后chmod +x aa.sh (必须增加权限才能访问) 2.shell打印java_home a.编辑/etc/pro... 阅读全文

posted @ 2018-03-06 18:13 xiaojiayu0011 阅读(94) 评论(0) 推荐(0)

摘要： 1.type 显示命令属于哪种类型2.常用语法规则:Bash utf-8占2,3,4个字节(变长)3.help 内部命令(系统自带) help for 刷选for相关的命令4.man 外部命令需要自己安装(yum install man man-pages -y) 空格翻页回车跳行 /a 搜索a相关 b往上翻 n5.whereis ls 查看命令所在位置,ELF代表编译后的... 阅读全文

posted @ 2018-03-06 18:13 xiaojiayu0011 阅读(116) 评论(0) 推荐(0)

JVM原理

摘要：推荐博客:http://www.cnblogs.com/redcreen/archive/2011/05/04/2037057.html java8官方文档：https://docs.oracle.com/javase/specs/jvms/se8/html/jvms-4.html#jvms-4.4 1.虚拟机:(当前最广泛的是HotSpot虚拟机) a.系统虚拟机(Vmware和Vitua... 阅读全文

posted @ 2018-03-06 18:12 xiaojiayu0011 阅读(147) 评论(0) 推荐(0)

jenkins构建项目

摘要：文件如果存放在C:\Program Files (x86)或者C:\Program Files需要进行设置系统权限，不然创建文件或目录会失败 1.设置好对应的svn仓库 2.GCPI配置的脚本：@echo off::创建文件夹APL用来打包md GCPIcd projects/server/GCPI:: compile code from svnecho start compiling j... 阅读全文

posted @ 2018-03-06 18:11 xiaojiayu0011 阅读(612) 评论(0) 推荐(0)

mongodb

摘要： 1.下载mongodb安装，参考：http://www.cnblogs.com/lzrabbit/p/3682510.html 创建服务：sc create MongoDB binPath= "C:\Program Files\MongoDB\Server\3.2\bin\mongod.exe --service --dbpath D:\Dev_SoftWare\mongodbp --logpat... 阅读全文

posted @ 2018-03-06 18:11 xiaojiayu0011 阅读(156) 评论(0) 推荐(0)

NIO

摘要： 1.Java NIO核心：http://ifeve.com/buffers/ a.Channels :所有的 IO 在NIO 中都从一个Channel 开始。Channel 有点象流。数据可以从Channel读到Buffer中，也可以从Buffer 写到Channel中主要channel：从通道读取数据到缓冲区，从缓冲区写入数据到通道 b.Buffers:缓冲区本质上... 阅读全文

posted @ 2018-03-06 18:10 xiaojiayu0011 阅读(143) 评论(0) 推荐(0)

lambda

摘要： 1.来源： http://www.importnew.com/16436.html // Java 8之前：new Thread(new Runnable() { @Override public void run() { System.out.println("Before Java8, too much code for too little to do"); }})... 阅读全文

posted @ 2018-03-06 18:10 xiaojiayu0011 阅读(191) 评论(0) 推荐(0)

SpringBoot学习

摘要： 1.启动信息参考链接：http://www.bysocket.com/?p=1124 jdk要求1.72.Spring boot属性配置：http://www.bysocket.com/?p=1786 Spring Boot 不单单从 application.properties 获取配置，所以我们可以在程序中多种设置配置属性。按照以下列表的优先级排列：1.命令行参数2.java:comp/en... 阅读全文

posted @ 2018-03-06 18:10 xiaojiayu0011 阅读(141) 评论(0) 推荐(0)