随笔分类 -  mongodb

spark读取mongodb数据写入hive表中
摘要：一 环境： 二.数据情况： 三.Eclipse+Maven+Java 3.1 依赖： 3.2 代码： 工具类： 四 错误解决办法： 下载cdh集群Hive的hive-site.xml文件，在项目中新建resources文件夹，讲hive-site.xml配置文件放入其中： 五 执行情况： 耗时14m 阅读全文
posted @ 2018-11-27 16:39 gongxiucheng 阅读(3370) 评论(0) 推荐(0)
mongodb分布式集群搭建
摘要：一.mongo安装步骤 架构：共三台机器，node1，node2，node3，mongdb版本为 mongodb-linux-x86_64-enterprise-rhel62-3.4.13.tgz,可以到官网下载： 二.角色分配： node1：shard01，shard01副本1，副本2，confi 阅读全文
posted @ 2018-04-16 16:17 gongxiucheng 阅读(250) 评论(0) 推荐(0)