Terry's blog

Focus on bigdata and cloud.

博客园 首页 新随笔 联系 订阅 管理
  383 Posts :: 1 Stories :: 255 Comments :: 51 Trackbacks

公告

共39页: 上一页 1 2 3 4 5 6 7 8 9 下一页 末页 

2018年10月22日 #

摘要: Maven组件如下: 官网代码如下: 运行以上代码出现如下错误等: Exception in thread "main" org.apache.kafka.common.config.ConfigException: Missing required configuration "bootstrap阅读全文
posted @ 2018-10-22 12:01 王晓成 阅读(113) 评论(0) 编辑

2018年10月14日 #

摘要: 作为一名Java使用者,掌握JVM的体系结构也是必须的。说起Java,人们首先想到的是Java编程语言,然而事实上,Java是一种技术,它由四方面组成:Java编程语言、Java类文件格式、Java虚拟机和Java应用程序接口(Java API)。它们的关系如下图所示: 运行期环境代表着Java平台阅读全文
posted @ 2018-10-14 13:57 王晓成 阅读(17) 评论(0) 编辑

2018年8月8日 #

摘要: 1. map函数 对集合的每一个元素运用某个函数操作,然后将结果作为一个新的列表返回。 实例1:将列表中每个元素值乘以2 scala> val list1=List(1,2,3,4) list1: List[Int] = List(1, 2, 3, 4) scala> list1.map(_*2) 阅读全文
posted @ 2018-08-08 20:34 王晓成 阅读(21) 评论(0) 编辑

2018年8月5日 #

摘要: 常规: ^ 必须匹配字符串开头,$必须匹配结尾 i 忽略大小写 . 句点匹配任意单个字符 \ 匹配特殊字符中的某一个,需使用反斜杠(\)进行转义,如 \/\/匹配(//) - 连字符定义一个字符范围 | 可供选择的部分(或) 重复序列: ? 0或1 * 0或更多 + 1或更多 {n} n次 {n,m阅读全文
posted @ 2018-08-05 16:48 王晓成 阅读(22) 评论(0) 编辑

摘要: 1.hadoop有master与slave,Storm与之对应的节点是什么? 2.Storm控制节点上面运行一个后台程序被称之为什么?3.Supervisor的作用是什么?4.Topology与Worker之间的关系是什么?5.Nimbus和Supervisor之间的所有协调工作有master来完成阅读全文
posted @ 2018-08-05 12:13 王晓成 阅读(24) 评论(0) 编辑

2018年7月24日 #

摘要: shell 脚本如下: logFile=/usr/local/log/$today.txt exec >> $logFile 2>&1阅读全文
posted @ 2018-07-24 10:42 王晓成 阅读(310) 评论(0) 编辑

2018年7月23日 #

摘要: 需求:从当前时间前6个月开始执行某个语句,直到执行到当前日期的前一天。 shell脚本如下: #!/bin/bash yesterday=`date -d -1day +%Y%m%d` sixmonthsago=` date -d -6month +%Y%m%d` echo $sixmonthsag阅读全文
posted @ 2018-07-23 18:15 王晓成 阅读(257) 评论(0) 编辑

2018年7月21日 #

摘要: 1. 进入mongo环境 mongo [root@slave2 ~]# mongoMongoDB shell version v3.4.16connecting to: mongodb://127.0.0.1:27017MongoDB server version: 3.4.16Server has阅读全文
posted @ 2018-07-21 11:51 王晓成 阅读(34) 评论(0) 编辑

摘要: 转自 https://www.cnblogs.com/layezi/p/7290082.html 安装前注意: 此教程是通过yum安装的.仅限64位centos系统 安装步骤: 1、创建仓库文件: 1vi /etc/yum.repos.d/mongodb-org-3.4.repo 1vi /etc/阅读全文
posted @ 2018-07-21 10:01 王晓成 阅读(33) 评论(0) 编辑

2018年7月20日 #

摘要: 通过spark sql 将hdfs 文件导入到mongodb阅读全文
posted @ 2018-07-20 23:34 王晓成 阅读(207) 评论(0) 编辑

共39页: 上一页 1 2 3 4 5 6 7 8 9 下一页 末页