随笔分类 - Eclipse/ MyEclipse / Scala IDE for Eclipse / IntelliJ IDEA / JetBrains PyCharm
摘要：不多说，直接上干货！ 前言 其实啊，无论你是初学者还是具备了有一定spark编程经验，都需要对spark源码足够重视起来。 本人，肺腑之己见，想要成为大数据的大牛和顶尖专家，多结合源码和操练编程。 好一段时间之前，写过这篇博客 使用 IntelliJ IDEA 导入 Spark 最新源码及编译 Sp
阅读全文
摘要：不多说，直接上干货！ 问题详情 以下是我，maven构建出来的最新spark2.2.0-bin-hadoop2.6的项目。 有些依赖包，maven还是无法一次性满足，所以，得手动加入lib的jar包。 其实，这原理很简单，跟hadoop项目是一样的。无非说maven构建项目方便下载jar包，但是也不
阅读全文
摘要：以下是我，手动的一个项目 假设，大家，还需要导入 导入spark的jar包：是安装主目录下的jars所有jar包和examples/jars包。
阅读全文
摘要：不多说，直接上干货！ 问题详情 运行出现log4j的问题 解决办法 在项目的pom.xml里添加如下的配置信息 当然，这版本，大家也可以选择个最新的稳定版本，我这里仅仅是个参考。
阅读全文
摘要：不多说，直接上干货！ 问题详情 当出现这类错误时是由于版本不匹配造成的 解决办法 如果你想快速运行的话，就用idea建立的maven项目生成的几个test类和对象注释掉，或者删除掉即可运行。 然后，运行即可。 当然，上面的这种方法不是最彻底的。 File -> settings -> Editor
阅读全文
摘要：不多说，直接上干货！ 为什么要写这篇博客？ 首先，对于spark项目，强烈建议搭建，用Intellij IDEA（Ultimate版本），如果你还有另所爱好尝试Scala IDEA for Eclipse，有时间自己去玩玩。但最好追随大流。 对于hadoop项目，强烈建议用eclipse。 其次，出
阅读全文
摘要：不多说，直接上干货！ 方法1：在线安装 第一步，在eclipse菜单栏下，选中help >Install New Software 第二步，点击图中 add 添加软件下载地址 第三步 ，选中需要的内容，安装即可 方法 2：本地安装 本地安装即已经下载好相关插件的文件包。 第一步，在eclipse菜单
阅读全文
摘要：不多说，直接上干货！ 见 Eclipse/Myeclipse/Scala IDEA for Eclipse里两种添加插件的方法（在线和离线） 第一步 ：在菜单栏中，找到help install new software 第二步，需要注意了，注意看图。红色区域标注的already installed?
阅读全文
摘要：这篇博客 是在Scala IDEA for Eclipse里手动创建scala代码编写环境。 Scala IDE for Eclipse的下载、安装和WordCount的初步使用（本地模式和集群模式） 本博文，教大家，用maven来创建。 第一步：安装scala插件 因为，我win7下的scala环
阅读全文
摘要：前期博客 Eclipse里的Java EE视图在哪里？MyEclipse里的Java EE视图在哪里？MyEclipse里的MyEclipse Java Enterprise视图在哪里？（图文详解） 如何在Myeclipse中使用tomcat（配置tomcat，发布web项目）？ 首先，打开MyEc
阅读全文
摘要：为什么要写这篇博客呢？ 是因为，最近接触一个web项目。 然后呢，Eclipse里的Java EE视图的位置与MyEclipse里不太一样。为了自己梳理日后查找，也是为了新手少走弯路。 Eclipse里的Java EE视图在哪里，怎么调出来？ MyEclipse里的Java EE视图在哪里，怎么调出
阅读全文
摘要：对于这里的打包，总结： (1) 最简单的，也是为了适应公司里，还是要用maven，当然spark那边sbt，maven都可以。但是maven居多。 Eclipse/MyEclipse下如何Maven管理多个Mapreduce程序？（企业级水平） IDEA里如何多种方式打jar包，然后上传到集群 Sp
阅读全文
摘要：问题描述详情： 无论你的问题是3.0还是3.1还是任何一个版本，则都可以通过以下版本来解决 解决办法： 把默认的Internal JRE改成了JAVA_HOME。 运行后成功了，截图如下：
阅读全文
摘要：好久一直使用默认工作空间。现在，回过头来想让那个提示框回来。 该如何做呢？ 1、找到我们的myeclipse安装目录下的 2、false是关闭。 3、改成true 4、同时，新增新的工作区间和之前旧的工作区间，并行选择。注意之间用\n分隔开。 4、重新启动myeclipse 成功！ 欢迎大家，加入我
阅读全文
摘要：最近正在学习机器学习和深度学习，需要python，大家都知道，它是这些领域的入门语言，不多说，直接上干货！突然发现python比java好玩多了 下面就开始python的安装以及测试，python2.7.11为例。（注意这里，我安装的是32位的。建议大家用python3.4的64位！！） 关于它的编
阅读全文
摘要：不多说，直接上干货！ 首先谈及这款软件，博主我用的理由：搞机器学习和深度学习！ 想学习Python的同学们，在这里隆重介绍一款 Python 的开发工具 pyCharm IDE。这是我最喜欢的 Python编辑器利器。而且还是跨平台的，在MAC OS和Windows下面都能安装。接下来就和大家分享下
阅读全文
摘要：http://www.cnblogs.com/braveym/p/5854703.html
阅读全文
摘要：福利 => 每天都推送 欢迎大家，关注微信扫码并加入我的4个微信公众号： 大数据躺过的坑 Java从入门到架构师 人工智能躺过的坑 Java全栈大联盟 每天都有大量的学习视频资料和精彩技术文章推送... 人生不易，唯有努力。 百家号 ：九月哥快讯 快手号： jiuyuege 为什么，我要在这里提出要
阅读全文
摘要：这个很简单。 前期博客，请移步： Eclipse下Maven新建项目、自动打依赖jar包（包含普通项目和Web项目） 截图示范：
阅读全文
摘要：问题详细如下： 解决办法： 注意：不要出现，如下的拼写错误！ 成功！ 请移步，见 Hadoop概念学习系列之搭建（windows）Eclipse/MyEclipse远程操作（Linux上）hadoop2.2.0/hadoop2.6.0 出错集（三十五）
阅读全文
浙公网安备 33010602011771号