会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
风和雨滴
博客园
首页
新随笔
联系
订阅
管理
2021年1月14日
spark设置检查点 使用ip访问hdfs 被拒绝连接
摘要: 在设置检查点的时候一开始的写法是这样的: spark.sparkContext.setCheckpointDir('/checkPoint') 提示路径明显为本地路径,请改为hdfs路径,于是显式的写成: spark.sparkContext.setCheckpointDir('hdfs://192
阅读全文
posted @ 2021-01-14 19:04 风和雨滴
阅读(748)
评论(0)
推荐(0)
公告