06 2021 档案

/usr/sbin/ntpd: error while loading shared libraries: libopts.so.25
摘要：起因： 在内网安装hadoop集群时，集群之间需要时间同步，由于内网状态，所以手动下载rpm包安装ntp rpm -ivh /tmp/ntpdate-4.2.6p5-29.el7.centos.2.x86_64.rpm rpm -ivh /tmp/ntp-4.2.6p5-29.el7.centos. 阅读全文

posted @ 2021-06-25 17:21 神奇的光头强 阅读(2647) 评论(0) 推荐(0)

Spark Sql之pathGlobFilter 和recursiveFileLookup 选项关于分区的一点猜想和验证
摘要：起因： 学习Spark Sql时，在官方文档看到两个有意思的选项pathGlobFilter 和recursiveFileLookup 。 简单地说，两个都是只对基础文件格式生效，eg: parquet,orc,avro,json.csv,text; pathGlobFilter 是根据正则筛选要读 阅读全文

posted @ 2021-06-24 11:19 神奇的光头强 阅读(626) 评论(0) 推荐(0)

导航