2017年6月13日

正文内容加载中...
posted @ 2017-06-13 10:54 剑迅 阅读(11) 评论(0) 编辑
 
摘要: spark基于RDD成功构建起大数据处理的一体化解决方案,将MappReduce、Streaming、SQL、Machine Learning、Graph Processing等 大数据计算模型统一到一个技术堆栈中;Spark的Spark SQL、MLlib、GraphX、Spark Streami阅读全文
posted @ 2017-06-13 10:52 剑迅 阅读(26) 评论(0) 编辑

2017年4月13日

摘要: Spark和Storm Spark基于MapReduce算法实现的分布式计算,不同于MapReduce的是,作业中间结果可以保存在内存中,而不要再读写HDFS, Spark适用于数据挖掘和机器学习等需要迭代的MapReduce算法 Spark Streaming是建立在Spark上的实时计算框架,可阅读全文
posted @ 2017-04-13 17:55 剑迅 阅读(7) 评论(0) 编辑

2017年2月27日

摘要: 1 安全 安全性相关内容分为认证、授权和审计(发现安全问题时可以查看相关历史记录) 用户认证 java API表示主体的是javax.security.auth.Subject类型,表示用户身份标识的是java.security.Principal接口,一个主体可以与多个身份标识关联, 主体所关联的阅读全文
posted @ 2017-02-27 11:32 剑迅 阅读(37) 评论(0) 编辑

2016年11月29日

摘要: 1 switch case 增加字符串类型,原理根据字符串hashcode以及string.equal比较2 数值字面量改进 新增二进制数值字面量 0b000004,在数值中间新增下划线方便阅读2000_0003 异常处理 增加addSuppressed 能够在触发异常后,通过该方法将finally阅读全文
posted @ 2016-11-29 17:30 剑迅 阅读(14) 评论(0) 编辑

2016年6月17日

摘要: 因为需要将拍的宝宝的微信小视频上传到亲宝宝软件,每次去手动找文件比较麻烦,所以做了个微信视频复制到手机本地的APP,做工虽然粗糙,但是绝对实用, 下载地址 http://pan.baidu.com/s/1nuSNkCx 三个页面 首页是相册大图预览 第二页是微信视频预览和复制功能,长按单个视频可以单阅读全文
posted @ 2016-06-17 09:26 剑迅 阅读(95) 评论(0) 编辑

2016年5月2日

摘要: springframework 3.x升级到 4.x 1 xsi:schemaLocation 对应的3.x->4.x 2 pom springframework <properties> <project.build.sourceEncoding>UTF-8</project.build.sour阅读全文
posted @ 2016-05-02 17:48 剑迅 阅读(240) 评论(0) 编辑

2016年4月22日

摘要: 安装mongodb(mongodb-linux-x86_64-3.2.4.tgz)1 export PATH=$PATH:/usr/local/mongodb/bin2 /usr/local/mongodb/bin 新增mongodb.conf port=27017 dbpath=/opt/mong阅读全文
posted @ 2016-04-22 17:28 剑迅 阅读(75) 评论(0) 编辑
 
摘要: kafka_2.9.2-0.8.1.tgzzookeeper-3.4.8.tar.gz 安装 zookeeper1 export PATH=$PATH:/usr/local/zookeeper/bin1 新增zookeeper service 启动服务cp /usr/local/zookeeper/阅读全文
posted @ 2016-04-22 17:25 剑迅 阅读(66) 评论(0) 编辑

2016年3月14日

摘要: 定义 AOP实际可以通过预编译方式和运行期动态代理实现在不修改源代码的情况下给程序动态统一添加功能的一种技术,非业务类横切于业务类), 通过AOP以动态和非入侵方式来增强服务 事务的四大属性:ACID即事务的原子性(Atomicity)、一致性(Consistency)、隔离性(Isolation)阅读全文
posted @ 2016-03-14 15:03 剑迅 阅读(113) 评论(0) 编辑