摘要: 日志分析 从10000条数据中统计各个浏览器占比,数据格式如下 难点: 1.从每一行中找到描述浏览器信息的字符串; 2.从这字符串中解析出浏览器; 解决: 1.多观察可以发现,每一行在第七个“ " ”之后的字符串为浏览器信息,可以通过以下方式获取 2.使用GitHub上现成的工具UserAgentP 阅读全文
posted @ 2018-07-19 08:54 遗风遗风丶 阅读(150) 评论(0) 推荐(0) 编辑
摘要: MapReduce倒排索引 代码: MyMapper.java MyCombiner.java MyReducer.java MyJob.java 结果: 阅读全文
posted @ 2018-07-19 08:25 遗风遗风丶 阅读(111) 评论(0) 推荐(0) 编辑
摘要: 1.复习Linux hadoop hdfs MapReduce基础知识 2.java操作HDFS文件 阅读全文
posted @ 2018-07-16 18:14 遗风遗风丶 阅读(129) 评论(0) 推荐(0) 编辑
摘要: 可重用性较强的JDBC封装 以下为代码,注释中写了主要思想 主类 com.util.JDBCUtil.java 以下为相关工具类 com.util.ColumnUtil.java com.util.IDUtil.java com.util.TableUtil.java com.util.RowMap 阅读全文
posted @ 2018-07-16 14:18 遗风遗风丶 阅读(303) 评论(0) 推荐(0) 编辑
摘要: 做了什么: 1.优化JDBC封装(使用了匿名内部类一级自定义注解) https://www.cnblogs.com/yifengyifeng/p/9317442.html 2.简单MapReduce实例:计算文件中单词个数 3.简单MapReduce实例:计算各个气象站平均气温,并使用EChart展 阅读全文
posted @ 2018-07-16 08:40 遗风遗风丶 阅读(106) 评论(0) 推荐(0) 编辑
摘要: 今天干了什么? 1.简单java操作HDFS 2.主机使用jdbc连接虚拟机中MySQL 3.java多线程基础(synchronize Thread Runnable) 4.主机maven web项目部署到虚拟机中的Tomcat 遇到什么问题: 1.java操作HDFS文件时,向文件中追加(app 阅读全文
posted @ 2018-07-11 18:56 遗风遗风丶 阅读(116) 评论(0) 推荐(0) 编辑
摘要: 今天我干了什么? 1.了解了一下eclipse配置maven项目; 2.Ubuntu安装ssh; 3.Ubuntu安装Tomcat、MySQL; 4.学习使用Xshell软件连接virtualBox中的Ubuntu,并上传文件; 5.学习使用notepad++编辑虚拟机中的文件; 6.Ubuntu中 阅读全文
posted @ 2018-07-10 22:08 遗风遗风丶 阅读(106) 评论(0) 推荐(0) 编辑
摘要: 今天学 习过程 和小结 遇到问 题汇总 学习技能思维导图 阅读全文
posted @ 2018-07-09 19:52 遗风遗风丶 阅读(103) 评论(0) 推荐(0) 编辑
摘要: 阅读《大型网站技术架构:核心原理与案例分析》第五、六、七章,结合我们的系统,分析如何增加相应的功能,提高系统的可用性和易用性。 这三章主要讲述的是网站的可用性、伸缩性和可扩展性。 高可用架构是万无一失的。要保证一个网站永远完全可用几乎是一件不可能完成的任务。我们通过一个神奇的数字9来度量网站可用性, 阅读全文
posted @ 2018-03-22 17:44 遗风遗风丶 阅读(101) 评论(0) 推荐(0) 编辑
摘要: 可用性分析: 场景设想:同一时间段内登陆淘宝网的人数过多造成未响应。 刺激源:巨额用户量 刺激:服务器崩溃 制品:系统 环境:用户正常操作 响应:系统响应人数过多,无法完成正常功能 响应度量:登陆之后正常使用 可修改性分析: 场景设想:修改用户界面 刺激源:开发人员 刺激:改变用户界面 制品:商店界 阅读全文
posted @ 2018-03-15 08:25 遗风遗风丶 阅读(112) 评论(0) 推荐(0) 编辑