随笔分类 -  2017下半年

摘要：使用json解析数据时，通常遇到这里就会出现问题'bytes' object has no attribute 'read'，这是由于使用的json内置函数不同，一个是load另一个是loads。 通常解决方式有两种，一种是更改函数为loads，另一种是更改编码格式为utf8 第一种解决方式： 第二 阅读全文

摘要：一、检查系统日志 检查系统错误登陆日志，统计IP重试次数 # 这里使用了lastb命令，该命令需要root权限，可以显示所有登陆信息。这里仅仅显示的root用户的，读者可以更具实际情况自行确定，或者直接全部都显示，你会有不一样的收获，每个人的脚本都不一样，更具实际情况自行编写。 # lastb ro 阅读全文

摘要：下载 sqoop-1.4.5 安装包 配置 sqoop-env.sh #Set path to where bin/hadoop is available 配置Hadoop export HADOOP_COMMON_HOME= #Set path to where hadoop-*-core.jar 阅读全文

摘要：hue使用mysql作为元数据库 hue默认使用sqlite作为元数据库，不推荐在生产环境中使用。会经常出现database is lock的问题。 解决方法： 其实官网也有解决方法，不过过程似乎有点问题。而且并不适合3.7之后的版本。我现在使用的是3.11，以下是总结的最快的切换方法。 1、先在m 阅读全文

摘要：更具实际情况更改user和passwordmysql>grant all privileges on *.* to user@localhost identified by 'passowrd' with grant option; 阅读全文

摘要：Hue是Cloudera开源的一个Hadoop UI，由Cloudera Desktop演化而来。面向用户提供方便的UI用于平时的Hadoop操作中。Apache Ambari面向的是管理员，用于安装、维护集群，而不是使用集群。两者针对的是不同需求。 Hue安装： Hue安装： 官网教程：http: 阅读全文

摘要：背景：某天当我打开自己的设备，突然发现ntfs分区无法写入任何文件，提示为只读文件系统，具体现象如下： 修复过程：排除权限问题，使用fsck进行修复无果后，使用e2fsck进行修复 显示超级快损坏，这样就好做了，重新修复即可： 解决方案： 一下列举的是Ubuntu安装过程，本人使用的archlinu 阅读全文