上一页 1 ··· 31 32 33 34 35 36 37 38 39 ··· 46 下一页
摘要: 1 安装检查报错 2 原因是因为自己的文件没有全部同步过去 hadoop003文件下面缺少了cm文件夹的内容 3 cp过去 scp -r cm root@hadoop003:/var/www/html 还有mysql的驱动也同步cp过去 4 重新run 结果还是不行 5 最后发现日志文件 ls 找到 阅读全文
posted @ 2019-02-25 22:24 Questions张 阅读(1219) 评论(0) 推荐(0)
摘要: 1 报错信息如下 + +| Error: JAVA_HOME is not set and Java could not be found |+ +| Please download the latest Oracle JDK from the Oracle Java web site || > h 阅读全文
posted @ 2019-02-25 21:42 Questions张 阅读(2036) 评论(0) 推荐(0)
摘要: 1 下载源 2安装源 3检查源是否安装成功 4 安装MySQL 5 启动MySQL服务 6 设置开机启动 7 修改root登陆密码 8 增加远程用户 9 修改mysql编码为UTF8mb4 支持emoji表情 修改/etc/my.cnf添加如下配置 重启MySQL 安装完成 阅读全文
posted @ 2019-02-25 17:41 Questions张 阅读(256) 评论(0) 推荐(0)
摘要: 1 购买3台阿里云服务 2 配置好ssh连接客户端 根据自己情况连接 3 安装好MySQL5.7 跳过,见之前博客 安装在hadoop001上 4 设置好Hosts文件 3台机器同时操作 5 关闭防火墙 3台机器同时操作 6 安装jdk1.8 3台同时操作 cd /mnt/software tar 阅读全文
posted @ 2019-02-25 17:03 Questions张 阅读(482) 评论(0) 推荐(0)
摘要: 1 涉及到的API 2 代码实现 定义ralation 定义Schema以及读取数据代码 类型转换类 3 依赖的pom文件配置 4测试代码以及测试文件数据 数据 参考文献:http://sparkdatasourceapi.blogspot.com/2016/10/spark-data-source 阅读全文
posted @ 2019-02-25 12:12 Questions张 阅读(2828) 评论(3) 推荐(1)
摘要: 阅读全文
posted @ 2019-02-25 07:58 Questions张 阅读(425) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2019-02-23 16:57 Questions张 阅读(239) 评论(0) 推荐(0)
摘要: 1 编写自己的udf方法hello pom配置 2 下载hive源码 源码下载:http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0-src.tar.gz 源码下载:http://archive.cloudera.com/cdh5/cd 阅读全文
posted @ 2019-02-22 18:56 Questions张 阅读(581) 评论(0) 推荐(0)
摘要: 1 创建表 hive命令行操作 2 造数据 shanxi.txt hunan.txt 3 导入数据 hive命令行操作 4 查询hive数据 hive表结构 hive> describe extended emp; 查询hive分区数据 hive> select * from emp where p 阅读全文
posted @ 2019-02-22 17:38 Questions张 阅读(1246) 评论(0) 推荐(0)
摘要: 1 官网内容 2 看一张图一目了然 3 详细配置 source配置文件 sink1配置文件 sink2配置 4 启动服务 5 效果测试 6 总结,从效果来看sink2挂了之后,数据发往sink1,实现了失败迁移的功能。 阅读全文
posted @ 2019-02-22 13:33 Questions张 阅读(476) 评论(0) 推荐(0)
上一页 1 ··· 31 32 33 34 35 36 37 38 39 ··· 46 下一页