摘要：本文主要介绍 Hadoop 常用的命令。 test命令 用于检测文件或目录是否存在，判断文件或目录大小。 用例： 1.判断文件或目录是否存在 2.判断文件或目录大小是否为0 【参考资料】 [1]. https://hadoop.apache.org/docs/r2.6.0/hadoop-projec 阅读全文

摘要：执行hadoop任务时报错： 产生原因： 以上报错原因基本都是由于HDFS上的文件异常结束导致的，通过查看log，发现/flume/nginx/app1/2019-06-05/00/app1@flume23_10003_4.1559665890953.gz:0+0 这个文件的大小为0字节。要理解空文 阅读全文

摘要：Python操作MySQL的常用方式。 1. 获取MySQL连接 2. 查询数据记录 3. 向MySQL插入数据 阅读全文

摘要：1. python操作MySQL数据库的依赖包MySQLdb 安装方式： 2. Python操作Hive的依赖包pyhs2 安装方式： 阅读全文

摘要：在使用 pyenv 版本管理工具时激活虚拟环境报错 报错信息： 执行 which python3 命令提示无法找到。 解决办法： 终端执行如下操作临时生效 将以上内容添加到 ~/.bashrc，并通过 source ~/.bashrc 生效环境变量。 阅读全文