随笔分类 - 疑难解答
摘要： 如上图所示，我想在test_1.py文件中import我在lstm_1.py中定义的LstmParam和 LstmNetwork。我直接采用的是最简单的引用方法：from lstm_1 import LstmParam, LstmNetwork，但是很明显报错了，不能直接这样引用。因为，编译环境
阅读全文
摘要：转自：https://www.cnblogs.com/ivictor/p/5142809.html 为了加强安全性，MySQL5.7为root用户随机生成了一个密码，在error log中，关于error log的位置，如果安装的是RPM包，则默认是/var/log/mysqld.log。 一般可通
阅读全文
摘要：Hadoop完全分布式环境下，上传文件到hdfs上时报错： 19/05/15 11:03:12 WARN hdfs.DFSClient: DataStreamer Exception org.apache.hadoop.ipc.RemoteException(java.io.IOException)
阅读全文
摘要：在进行Spark与HBase 集成的过程中遇到以下问题： java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder': at org
阅读全文
摘要：Spark on Yarn模式运行错误： bin/spark-shell --master yarn --deploy-mode client #报错 查看8088页面上的工作日志 错误原因：在执行任务时检测到虚拟机的内存太小，2.2g的虚拟内存实际值，超过了2.1g的上限，不能满足该任务所
阅读全文
摘要：今天在IDEA中新建了一个maven工程，但是在我想要新建Class时发件右键菜单里竟然没有Java Class选项！如下图所示： 如上图红圈所示，我们可以根据对项目的任意目录进行这五种目录类型标注，这个知识点非常非常重要，必须会。 Sources： 一般用于标注类似 src 这种可编译目录。有时候
阅读全文
摘要：Sqoop Export数据到本地数据库时出现错误，命令如下： 错误日志如下： 该错误的问题在于分隔符，因为您没有在配置单元表中指定分隔符，默认的配置单元分隔符是： '\ 001'字段终止 '\ 002'的收藏品终止 '\ 003'终止的地图密钥 LINES终止于'\ n' 所以要解决问题，就需要更
阅读全文
摘要：首先查看数据库参数编码： 然后根据命令统一编码格式： 再确定建表时的编码集是否统一（特别是会出现中文的属性值）： 如果表的编码格式不统一也要修改。 此时，再重新执行Sqoop Import操作就不会再出现乱码了。 以上就是博主为大家介绍的这一板块的主要内容，这都是博主自己的学习过程，希望能给大家带来
阅读全文
摘要：环境下载 首先将下载的 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz放到 /usr/hadoop/目录下（该目录可以自定义，一般为Hadoop集群安装目录），然后对安装包解压、修改文件名和修改用户权限。 环境配置 1.配置hadoop版本号 切换到/sqoop
阅读全文
摘要：今天用Hive的JDBC实例时出现了HiveSQLException: Error while compiling statement: No privilege 'Create' found for outputs { database:default }的错误，日志如下。 从日志可以清楚地看出，
阅读全文
摘要：错误日志如下： 以上就是博主为大家介绍的这一板块的主要内容，这都是博主自己的学习过程，希望能给大家带来一定的指导作用，有用的还望大家点个支持，如果对你没用也望包涵，有错误烦请指出。如有期待可关注博主以第一时间获取更新哦，谢谢！ 版权声明：本文为博主原创文章，未经博主允许不得转载。
阅读全文
摘要：错误日志如下： 如日志中红色字体所示，该错误是由于Zookeeper对应的端口号被占用导致的。 查看端口占用情况： 如上所示，占用Zookeeper对应端口号的应用是java，只需要kill掉该应用就能成功启动Zookeeper了。 重启如下： Zookeeper启动成功！ 以上就是博主为大家介绍的
阅读全文
摘要：今天跑Hadoop程序时一直提示我无法加载本地库，然后就直接退出运行了，如下图所示。 原因是由于Apache提供的Hadoop本地库是32位的，而在64位的服务器上就会有问题，因此需要自己编译64位的版本。下载地址：http://dl.bintray.com/sequenceiq/sequencei
阅读全文
摘要：hadoop操作权限问题：WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable及解决办法
阅读全文
摘要：Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z 问题原因及解决方法
阅读全文
摘要：错误日志如下： 解决方法： 1.未配置环境变量-->配置环境变量HADOOP_HOME，然后重启电脑。或者代码中设置System.setProperty("hadoop.home.dir", "hadoop安装路径")。 2.还有一种可能HADOOP_HOME的bin目录下根本没有winutils.
阅读全文
摘要：Hadoop 3节点集群无法成功启动zookeeper的原因及解决办法
阅读全文
摘要：bash:haoop:command not found错误解决方案
阅读全文
摘要：eclipse链接Hadoop集群时报错Error：Call From xxx/xxx.xxx.xxx.xxx to hostname1:9000 failed on connection exception
阅读全文
摘要：这是由于缺少源程序代码所导致的错误，需要导入源程序代码，并添加src绑定。
阅读全文
浙公网安备 33010602011771号