三多
技术领域的难题往往代表着经典 而我只是一个伪技术宅!!!
摘要: Hue是Cloudera开源的一个Hadoop UI,由Cloudera Desktop演化而来。面向用户提供方便的UI用于平时的Hadoop操作中。Apache Ambari面向的是管理员,用于安装、维护集群,而不是使用集群。两者针对的是不同需求。 Hue安装: Hue安装: 官网教程:http: 阅读全文
posted @ 2017-08-23 23:25 SanDuo1314 阅读(3960) 评论(1) 推荐(0) 编辑
摘要: 从15年开始在博客园上写点儿东西,刚开始是教程,后来开始写点儿杂记,乱七八糟的东西,18年毕业后,并没有继续做开发这方面,所以内容就断掉了,至于是否能捡起来就是后话了,有朋友之前在后台留言,我今天才看到,为了不耽误大家时间,博客的内容仅供参考,不支持后续更新,敬请谅解。 感谢:旭哥,康师傅,勇哥等人 阅读全文
posted @ 2021-07-09 14:23 SanDuo1314 阅读(43) 评论(0) 推荐(0) 编辑
摘要: 使用json解析数据时,通常遇到这里就会出现问题'bytes' object has no attribute 'read',这是由于使用的json内置函数不同,一个是load另一个是loads。 通常解决方式有两种,一种是更改函数为loads,另一种是更改编码格式为utf8 第一种解决方式: 第二 阅读全文
posted @ 2017-10-14 18:33 SanDuo1314 阅读(27701) 评论(0) 推荐(0) 编辑
摘要: 一、检查系统日志 检查系统错误登陆日志,统计IP重试次数 # 这里使用了lastb命令,该命令需要root权限,可以显示所有登陆信息。这里仅仅显示的root用户的,读者可以更具实际情况自行确定,或者直接全部都显示,你会有不一样的收获,每个人的脚本都不一样,更具实际情况自行编写。 # lastb ro 阅读全文
posted @ 2017-08-31 15:16 SanDuo1314 阅读(2932) 评论(0) 推荐(0) 编辑
摘要: 下载 sqoop-1.4.5 安装包 配置 sqoop-env.sh #Set path to where bin/hadoop is available 配置Hadoop export HADOOP_COMMON_HOME= #Set path to where hadoop-*-core.jar 阅读全文
posted @ 2017-08-25 15:25 SanDuo1314 阅读(851) 评论(0) 推荐(0) 编辑
摘要: hue使用mysql作为元数据库 hue默认使用sqlite作为元数据库,不推荐在生产环境中使用。会经常出现database is lock的问题。 解决方法: 其实官网也有解决方法,不过过程似乎有点问题。而且并不适合3.7之后的版本。我现在使用的是3.11,以下是总结的最快的切换方法。 1、先在m 阅读全文
posted @ 2017-08-25 14:49 SanDuo1314 阅读(1967) 评论(0) 推荐(0) 编辑
摘要: 背景:某天当我打开自己的设备,突然发现ntfs分区无法写入任何文件,提示为只读文件系统,具体现象如下: 修复过程:排除权限问题,使用fsck进行修复无果后,使用e2fsck进行修复 显示超级快损坏,这样就好做了,重新修复即可: 解决方案: 一下列举的是Ubuntu安装过程,本人使用的archlinu 阅读全文
posted @ 2017-07-30 13:16 SanDuo1314 阅读(2133) 评论(0) 推荐(0) 编辑
摘要: Linux下载文件的时候,由于网络等原因,下载的文件可能不完整,对于别有心机的人可以更改文件,这就需要我们对文件的完整性进行验证。这里以securityonion-14.04.5.2.iso为例进行验证。 首先下载securityonion-14.04.5.2.iso和securityonion-1 阅读全文
posted @ 2017-07-16 11:39 SanDuo1314 阅读(7463) 评论(0) 推荐(1) 编辑
摘要: 1.更新系统安装必要的依赖包 2.安装MariaDB10以上版本,如果不清楚安装的版本是否符合nextcloud要求,可以到官网上查询 nextcloud官网:https://nextcloud.com/install/# MariaDB安装与配置: 安装完毕以后,运行: 这个的主要目的是更新和配置 阅读全文
posted @ 2017-06-27 00:26 SanDuo1314 阅读(5067) 评论(0) 推荐(0) 编辑
摘要: ownCloud是一个免费开源的软件,用于为分享文件,日历,联系人,书签和个人音频/视频。非常容易安装和管理。 1:搭建环境配置:你的服务应该工作在LAMP上。参考下面链接去安装一键LAMP服务。 https://lnmp.org/install.html 如果安装的nginxd等版本不满足ownc 阅读全文
posted @ 2017-06-19 11:30 SanDuo1314 阅读(3071) 评论(0) 推荐(0) 编辑