22.把hive表中数据导入到mysql中
摘要：
先通过可视化工具链接mysql，在链接的时候用sqoop 用户登录 在数据库userdb下新建表 保存，输入表名upflow 现在我们需要把hive里面的数据通过sqoop导入到mysql里面 可以看到mysql的数据 阅读全文
posted @ 2019-08-26 23:08 百里登峰 阅读(4196) 评论(0) 推荐(0) 编辑
21.根据hive绑定数据统计计算保存到hive表中
摘要：
创建upflow表 将表access里面的内容导入到upflow表中 阅读全文
posted @ 2019-08-25 17:50 百里登峰 阅读(297) 评论(0) 推荐(0) 编辑
20.采集项目流程篇之清洗数据绑定到hive表中
摘要：
先启动hive 在mydb2这个数据库中创建表； 把清洗后的数据导入到刚刚创建的hive表中 阅读全文
posted @ 2019-08-25 16:46 百里登峰 阅读(303) 评论(0) 推荐(0) 编辑
airflow 安装配置celery+rabbitmq celery+redis
摘要：
AirFlow的安装可以参考：https://www.cnblogs.com/braveym/p/11378851.html 这里介绍的是AirFlow 安装配置celery+rabbitmq 和 celery+redis 一、airflow 安装配置celery+rabbitmq 1、安装cele 阅读全文
posted @ 2019-08-21 15:11 百里登峰 阅读(1478) 评论(1) 推荐(0) 编辑
Centos7 安装部署 Airflow
摘要：
本人在centos7 的环境下部署，怎么在centos7 下配置静态 IP 关闭防火墙 以及安装jdk在这里不多赘述， centos7 配置静态ip可以参考:https://www.cnblogs.com/braveym/p/8523100.html 和 https://www.cnblogs.co 阅读全文
posted @ 2019-08-20 17:58 百里登峰 阅读(2041) 评论(0) 推荐(0) 编辑
19.通过MAPREDUCE 把收集数据进行清洗
摘要：
在eclipse软件里创建一个maven项目 jdk要换成本地安装的1.8版本的 加载pom.xml文件 在加载依赖包的时候如果出现错误，在仓库里找不到1.8jdk.tools 在这个地方改成本地的jdk绝对路径，再重新加载一次maven的依赖包 我这里修改成 在项目下新建AccessLogPreP 阅读全文
posted @ 2019-08-20 00:35 百里登峰 阅读(601) 评论(0) 推荐(0) 编辑
SpringBoot整合MyBatis完成用户查询
摘要：
接上面工程代码，可以参考：https://www.cnblogs.com/braveym/p/11349409.html 1 、在 mapper 接口中以及映射配置文件中添加相关代码 修改UserMapper接口 修改UsersMapper.xml文件 2 、在业务层中添加查询方法 在UserSer 阅读全文
posted @ 2019-08-16 01:02 百里登峰 阅读(873) 评论(0) 推荐(0) 编辑
SpringBoot整合MyBatis完成添加用户
摘要：
怎么创建项目就不说了，可以参考:https://www.cnblogs.com/braveym/p/11321559.html 打开本地的mysql数据库，创建表 在项目里面新建Users.java类 创建 mapper 接口以及映射配置文件 接口 映射文件 创建业务层 创建 Controller 阅读全文
posted @ 2019-08-13 23:57 百里登峰 阅读(2191) 评论(0) 推荐(0) 编辑
SpringBoot整合持久层技术-创建项目
摘要：
新建项目 Pom.xml文件 阅读全文
posted @ 2019-08-13 00:22 百里登峰 阅读(387) 评论(0) 推荐(0) 编辑
SpringBoot整合Thymeleaf
摘要：
1、先创建项目 在pom文件里添加依赖 pom.xml 目录位置： src/main/resources/templatestemplates： 该目录是安全的。 意味着该目录下的内容是不允许外界直接访问的。 2. Thymeleaf 的基本使用2.1Thymeleaf 特点：Thymelaef 是 阅读全文
posted @ 2019-08-11 22:45 百里登峰 阅读(456) 评论(0) 推荐(0) 编辑