会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
贫民窟里的程序高手
博客园
::
首页
::
新随笔
::
联系
::
订阅
::
管理
::
公告
2017年12月22日
pyspark连接mysql
摘要: 如果报错 no suitable driver 需要把连接mysql的jdbc的jar包拷到spark文件夹里的jars文件夹里。 附:使用SQL查询的代码 再附,HiveContext的使用及RDD转DataFrame:
阅读全文
posted @ 2017-12-22 16:15 贫民窟里的程序高手
阅读(892)
评论(0)
推荐(0)
Eclipse下使用PySpark报Could not find valid SPARK_HOME while searching
摘要: 主要是Eclipse下需要多一步配置,就是需要加上SPARK_HOME的系统变量。 首先,在Windows的环境变量中加入SPARK_HOME 然后,在Eclipse的配置中加入这个环境变量: Window=>Preferences=> 剩下的见下图
阅读全文
posted @ 2017-12-22 15:25 贫民窟里的程序高手
阅读(1093)
评论(1)
推荐(0)