摘要: 第三章主要讲的是Refined Architecture(细化架构)。它是架构设计的一个层次,即“概念级”解决方案。 一线架构师讲的架构设计一共有三个阶段,预处理阶段和概念设计阶段以及细化架构阶段。 从概念架构到细化架构,先设计概念架构,构思关键问题的解决策略;在进行细化架构的设计,保证为开发提供足 阅读全文
posted @ 2020-04-09 18:49 暗梦 阅读(148) 评论(1) 推荐(0) 编辑
摘要: 完成关键字、应用行业以及应用行业代码的清洗,并导入MySQL数据库,完成部分可视化界面 阅读全文
posted @ 2020-03-15 16:50 暗梦 阅读(64) 评论(0) 推荐(0) 编辑
摘要: 完成了地域、时间维度的清洗 阅读全文
posted @ 2020-03-14 17:50 暗梦 阅读(63) 评论(0) 推荐(0) 编辑
摘要: 加深学习DataX、Kettle、Logstash 阅读全文
posted @ 2020-03-10 08:41 暗梦 阅读(73) 评论(0) 推荐(0) 编辑
摘要: 性能战术的目标:对一定时间限制内到达系统的事件生成一个响应,这些事件可以是消息到达、定时器到时,系统状态的变化。 性能战术的分类以及基本的方法 资源需求: 需求具有两个特性:资源流中事件之间的时间间隔;每个请求所消耗的资源 1.减少一个事件流所用的资源 (1)提高计算效率,如改进关键算法 比如在数据 阅读全文
posted @ 2020-03-02 22:01 暗梦 阅读(205) 评论(0) 推荐(0) 编辑
摘要: 根据德拓的视频学习并掌握了DataX、Kettle、Logstash 阅读全文
posted @ 2020-03-01 18:55 暗梦 阅读(92) 评论(0) 推荐(0) 编辑
摘要: 首先 Scala官网地址: https://www.scala-lang.org/download 下载.tgz文件 安装scala 阅读全文
posted @ 2020-02-17 21:18 暗梦 阅读(82) 评论(0) 推荐(0) 编辑
摘要: Result文件数据说明: Ip:106.39.41.166,(城市) Date:10/Nov/2016:00:01:02 +0800,(日期) Day:10,(天数) Traffic: 54 ,(流量) Type: video,(类型:视频video或文章article) Id: 8701(视频或 阅读全文
posted @ 2019-11-13 21:50 暗梦 阅读(156) 评论(0) 推荐(0) 编辑
摘要: 实验目的 1.准确理解Mapreduce的设计原理 2.熟练掌握WordCount程序代码编写 3.学会自己编写WordCount程序进行词频统计 实验原理 MapReduce采用的是“分而治之”的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个从节点共同完成,然后通过整合各个节点的中间结 阅读全文
posted @ 2019-10-30 20:30 暗梦 阅读(213) 评论(0) 推荐(0) 编辑
摘要: 所花时间:15小时左右 代码量:300 博客量:1 新知识: 无 阅读全文
posted @ 2019-06-22 15:53 暗梦 阅读(99) 评论(0) 推荐(0) 编辑