Terry's blog

Focus on bigdata and cloud.

博客园 首页 新随笔 联系 订阅 管理
上一页 1 ··· 36 37 38 39 40 41 42 43 44 ··· 77 下一页

2018年10月23日 #

摘要: K均值(K-means)算法 K-means 算法是最为经典的基于划分的聚类方法,是十大经典数据挖掘算法之一。K-means算法的基本思想是:以空间中k个点为形心进行聚类,对最靠近他们的对象归类。通过迭代的方法,逐次更新各簇的形心的值,直至得到最好的聚类结果。(形心可以是实际的点、或者是虚拟点) 假 阅读全文
posted @ 2018-10-23 16:17 王晓成 阅读(1011) 评论(0) 推荐(0)

摘要: 基本概念 关联分析是一种在大规模数据集中寻找有趣关系的非监督学习算法。这些关系可以有两种形式:频繁项集或者关联规则。频繁项集(frequent item sets)是经常出现在一块的物品的集合,关联规则(association rules)暗示两种物品之间可能存在很强的关系。 下图是一个乒乓球店的交 阅读全文
posted @ 2018-10-23 14:10 王晓成 阅读(2190) 评论(0) 推荐(0)

2018年10月22日 #

摘要: Maven组件如下: 官网代码如下: 运行以上代码出现如下错误等: Exception in thread "main" org.apache.kafka.common.config.ConfigException: Missing required configuration "bootstrap 阅读全文
posted @ 2018-10-22 12:01 王晓成 阅读(3867) 评论(0) 推荐(0)

2018年10月14日 #

摘要: 作为一名Java使用者,掌握JVM的体系结构也是必须的。说起Java,人们首先想到的是Java编程语言,然而事实上,Java是一种技术,它由四方面组成:Java编程语言、Java类文件格式、Java虚拟机和Java应用程序接口(Java API)。它们的关系如下图所示: 运行期环境代表着Java平台 阅读全文
posted @ 2018-10-14 13:57 王晓成 阅读(212) 评论(0) 推荐(0)

2018年8月8日 #

摘要: 1. map函数 对集合的每一个元素运用某个函数操作,然后将结果作为一个新的列表返回。 实例1:将列表中每个元素值乘以2 scala> val list1=List(1,2,3,4) list1: List[Int] = List(1, 2, 3, 4) scala> list1.map(_*2) 阅读全文
posted @ 2018-08-08 20:34 王晓成 阅读(827) 评论(0) 推荐(0)

2018年8月5日 #

摘要: 常规: ^ 必须匹配字符串开头,$必须匹配结尾 i 忽略大小写 . 句点匹配任意单个字符 \ 匹配特殊字符中的某一个,需使用反斜杠(\)进行转义,如 \/\/匹配(//) - 连字符定义一个字符范围 | 可供选择的部分(或) 重复序列: ? 0或1 * 0或更多 + 1或更多 {n} n次 {n,m 阅读全文
posted @ 2018-08-05 16:48 王晓成 阅读(163) 评论(0) 推荐(0)

摘要: 1.hadoop有master与slave,Storm与之对应的节点是什么? 2.Storm控制节点上面运行一个后台程序被称之为什么?3.Supervisor的作用是什么?4.Topology与Worker之间的关系是什么?5.Nimbus和Supervisor之间的所有协调工作有master来完成 阅读全文
posted @ 2018-08-05 12:13 王晓成 阅读(362) 评论(0) 推荐(0)

2018年7月24日 #

摘要: shell 脚本如下: logFile=/usr/local/log/$today.txt exec >> $logFile 2>&1 阅读全文
posted @ 2018-07-24 10:42 王晓成 阅读(3381) 评论(0) 推荐(0)

2018年7月23日 #

摘要: 需求:从当前时间前6个月开始执行某个语句,直到执行到当前日期的前一天。 shell脚本如下: #!/bin/bash yesterday=`date -d -1day +%Y%m%d` sixmonthsago=` date -d -6month +%Y%m%d` echo $sixmonthsag 阅读全文
posted @ 2018-07-23 18:15 王晓成 阅读(1875) 评论(0) 推荐(0)

2018年7月21日 #

摘要: 1. 进入mongo环境 mongo [root@slave2 ~]# mongoMongoDB shell version v3.4.16connecting to: mongodb://127.0.0.1:27017MongoDB server version: 3.4.16Server has 阅读全文
posted @ 2018-07-21 11:51 王晓成 阅读(271) 评论(0) 推荐(0)

上一页 1 ··· 36 37 38 39 40 41 42 43 44 ··· 77 下一页