2019年8月26日
hive分区与实际分区文件不匹配导致spark读文件出错的问题解决
摘要： 先解释下，由于历史原因导致hive中的看到分区比hdfs中的文件夹不匹配，存在hive中分区数有，实际hdfs中无此文件夹。 spark中通过sparkSQL读取hive中的该表时，将会出现异常。 解决方案： 1. 检查该表是否是外部表，如果不是，将属性修改为外部表属性。 这里修改为外部表，目的是在 阅读全文
posted @ 2019-08-26 19:45 硅谷工具人 阅读(1802) 评论(0) 推荐(0)
成功之道，在于每个人生阶段都要有不同的目标，并且通过努力实现自己的目标，毕竟人生不过百年! 所有奋斗的意义在于为个人目标实现和提升家庭幸福，同时能推进社会进步和国家目标! 正如古人讲的正心诚意格物致知，修身齐家治国平天下。