会员
周边
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
Questions张
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
30
31
32
33
34
35
36
37
38
···
45
下一页
2019年2月26日
CentOS7查询最近修改的文件
摘要: 当需要排查问题的时候,经常需要找到最近修改和产生的文件 下面的命令是查询当前目录下以log结尾的日志,并且在30分钟内修改过,这个可以根据情况修改时间为1分钟,查找最新产生的日志 突然想到这个问题,是因为今天有个问题,日志文件找了半天,一个个搜索的,但是其实按照全局的文件生成时间来查找,更加容易找到
阅读全文
posted @ 2019-02-26 01:37 Questions张
阅读(3610)
评论(0)
推荐(0)
2019年2月25日
service cloudera-scm-server restart报错 Unable to retrieve remote parcel repository manifest
摘要: 1 详细错误 2 原因,因为我配置的是本地库,所以自然连不了,检查状态是启动的状态
阅读全文
posted @ 2019-02-25 23:48 Questions张
阅读(1919)
评论(2)
推荐(0)
CDH安装报错 Monitor-HostMonitor throttling_logger ERROR ntpq: ntpq -np: not synchronized to any server
摘要: 1 没有安装ntp同步服务 所有机器统一时区,确认所有机器配置一致 vim /etc/sysconfig/clock ntp服务器配置 另外机器配置,设置成自己的ntp服务器ip
阅读全文
posted @ 2019-02-25 23:27 Questions张
阅读(2327)
评论(0)
推荐(0)
CDH5.12安装检查Inspector failed on the following hosts...
摘要: 1 安装检查报错 2 原因是因为自己的文件没有全部同步过去 hadoop003文件下面缺少了cm文件夹的内容 3 cp过去 scp -r cm root@hadoop003:/var/www/html 还有mysql的驱动也同步cp过去 4 重新run 结果还是不行 5 最后发现日志文件 ls 找到
阅读全文
posted @ 2019-02-25 22:24 Questions张
阅读(1234)
评论(0)
推荐(0)
启动CDH的cloudera-scm-server报错Error: JAVA_HOME is not set and Java could not be found
摘要: 1 报错信息如下 + +| Error: JAVA_HOME is not set and Java could not be found |+ +| Please download the latest Oracle JDK from the Oracle Java web site || > h
阅读全文
posted @ 2019-02-25 21:42 Questions张
阅读(2049)
评论(0)
推荐(0)
CentOS7.2通过Yum安装MySQL5.7
摘要: 1 下载源 2安装源 3检查源是否安装成功 4 安装MySQL 5 启动MySQL服务 6 设置开机启动 7 修改root登陆密码 8 增加远程用户 9 修改mysql编码为UTF8mb4 支持emoji表情 修改/etc/my.cnf添加如下配置 重启MySQL 安装完成
阅读全文
posted @ 2019-02-25 17:41 Questions张
阅读(279)
评论(0)
推荐(0)
阿里云三台CentOS7.2配置安装CDH5.12
摘要: 1 购买3台阿里云服务 2 配置好ssh连接客户端 根据自己情况连接 3 安装好MySQL5.7 跳过,见之前博客 安装在hadoop001上 4 设置好Hosts文件 3台机器同时操作 5 关闭防火墙 3台机器同时操作 6 安装jdk1.8 3台同时操作 cd /mnt/software tar
阅读全文
posted @ 2019-02-25 17:03 Questions张
阅读(488)
评论(0)
推荐(0)
Spark SQL自定义外部数据源
摘要: 1 涉及到的API 2 代码实现 定义ralation 定义Schema以及读取数据代码 类型转换类 3 依赖的pom文件配置 4测试代码以及测试文件数据 数据 参考文献:http://sparkdatasourceapi.blogspot.com/2016/10/spark-data-source
阅读全文
posted @ 2019-02-25 12:12 Questions张
阅读(2863)
评论(3)
推荐(1)
Spark思维导图之性能优化
摘要:
阅读全文
posted @ 2019-02-25 07:58 Questions张
阅读(442)
评论(0)
推荐(0)
2019年2月23日
Spark思维导图之内存管理
摘要:
阅读全文
posted @ 2019-02-23 16:57 Questions张
阅读(246)
评论(0)
推荐(0)
上一页
1
···
30
31
32
33
34
35
36
37
38
···
45
下一页
公告