摘要：1首先对于一个java还白的小白，先理解CDH与Hadoop的关系 一、Hadoop版本选择。 Hadoop大致可分为Apache Hadoop和第三方发行第三方发行版Hadoop，考虑到Hadoop集群部署的高效，集群的稳定性， 以及后期集中的配置管理，业界多使用Cloudera公司的发行版，简称 阅读全文

摘要：pip包下载安装pyspark pip install pyspark 这里可能会遇到安装超时的情况 加参数 --timeout=100 pip -default -timeout=100 install -U pyspark 下面是我写的一些代码，在运行时，没什么问题，但是目前不知道怎么拿到rdd 阅读全文

摘要：计算机专科毕业，.net开发已有8年有余，中途断断续续，似懂非懂，积累了一些经验知识，但是不求甚解，属于那种一瓶不满半瓶子晃荡，这么一个状态。 主要从事web开发，涉及一些前端jq等，还有接口开发，搜索，语音识别，支付，加速，等各种第三方调用，还有一些文件监控，分解分发任务。等一些功能的应用程序。 阅读全文