Evak

摘要： 今天早上看百度api返回来的各种参数时发现里面有行政区划代码的属性，本来我还在想着拆分字段之类的， 利用行政代码去区分，就是全国各省市区太多，查询需要花费很长时间，这下是解决了燃眉之急，所以 利用百度api获取行政区划代码插入到了数据库中，接下来是关键字的提取。 这么长时间以来用java编程已经成了 阅读全文

摘要： 今天的一大半时间都在和百度api打交道。解析一个地址都花费了很长时间，主要是思路不知道怎么从哪儿开始。 最后在网上看到了经纬度的一篇内容，突然有了启发，可以通过先查找地方在经纬度上，然后在根据经纬度查找省市区。 有了这个启示，思路就通畅了起来，接下来就是一直在细节上完善，最后清洗出来了地域维度，之后 阅读全文

摘要： 第三周主要是阅读了软件架构的教材，仔细阅读了软件质量属性的内容，病毒的项目进一步完善，完成了动态演示效果。spark的实验又再一次回顾，增加熟练度。 时间 第三周 编程时间 约30h 编程代码量 约1400行 学习内容 javaweb、爬虫以及相关数据可视化 阅读全文

摘要： 性能战术目标和基本的方法如下图 总结来说性能最重要的就是时间和空间的合理划分。响应时间越短对于空间的要求往往也会非常高，不能顾此失彼，一个高性能的系统应该是两者都能兼顾到。 资源需求： 1.减少一个事件流所用的资源 1.1：尽量避免随意使用静态变量。多使用局部变量 1.2：尽量使用基本数据类型代替对 阅读全文

摘要： 首先了解一下可用性的概念：是在某个考察时间，系统能够正常运行的概率或时间占有率期望值。考察时间为指定瞬间，则称瞬时可用性；考察时间为指定时段，则称时段可用性；考察时间为连续使用期间的任一时刻，则称固有可用性。它是衡量设备在投入使用后实际使用的效能，是设备或系统的可靠性、可维护性和维护支持性的综合特性 阅读全文

摘要： 1、可用性 刺激源：双十一到来，迎来购物的高峰期 刺激：系统高点击量，用户访问量，导致网站崩溃。 制品：系统处理器。 环境：处于高运算状态。 响应：启动相应的任务，应对双十一高浏览量。 响应度：持续双十一整天。 2、可修改性 刺激源：双十一到来，购物高峰期 刺激：高使用量，大数据可以是服务器崩溃。 阅读全文

摘要： 架构这个含义最开始运用在建筑上的，在架构漫谈中对于架构的是这样定义的： 根据要解决的问题，对目标系统的边界进行界定。 并对目标系统按某个原则的进行切分。切分的原则，要便于不同的角色，对切分出来的部分，并行或串行开展工作，一般并行才能减少时间。 并对这些切分出来的部分，设立沟通机制。 根据3，使得这些 阅读全文

摘要： 今天询问同学，找了一下热词的相关内容，也和同学的热词的网站一样是百度百科的一个分类，百度百科也是使用的post传值来传输的内容，但是他每次传输的数量可能有限当我每次传输1000条时发现经常报错，之后我就更改了爬取条数100跳可以爬取了，一共爬取了一万多条数据，也不枉我捣鼓了一天。 这是我爬取的代码（ 阅读全文

摘要： 今天完成了spark实验四的编程。起初是在eclipse上安装了Scala的环境，同通过环境进行的相关内容的编程，Scala的编程和Java编程的思路差不多，在编程时的相关语句以及用法不太一样所以耗费了一些时间。程序代码。 源代码： import scala.io.Source import jav 阅读全文

摘要： 今天完成了spark实验三，以及研究了下实验四，实验三需要在spark中进行打包，之前sbt的问题已大部分解决，今天完成了相关的实验内容 打包成功截图： 明天将完成实验四的相关内容以及加快实验的进度。 阅读全文