蔡地像徐坤

2021年12月27日

摘要： HA Hadoop完全分布式环境部署 1、背景知识 HDFS HA通常由两个NameNode组成，一个处于Active状态，另一个处于Standby状态。Active NameNode对外提供服务，而Standby NameNode则不对外提供服务，仅同步Active NameNode的状态，以便能阅读全文

posted @ 2021-12-27 14:41 蔡地像徐坤阅读(380) 评论(0) 推荐(0)

Hadoop单节点伪分布式环境部署

摘要： Hadoop单节点伪分布环境部署 1、背景知识 2、使用软件及其版本环境虚拟机:VirtualBox 6.0.24 r139119 Linux:CentOS 7 Windows:Windows10 软件 JDK:Jdk1.8_131 Hadoop:Hadoop-2.6.0-cdh5.7.0 工具阅读全文

posted @ 2021-12-27 14:29 蔡地像徐坤阅读(166) 评论(0) 推荐(0)

Hadoop完全分布式环境部署

摘要： Hadoop完全分布式环境部署 1、背景知识 2、使用软件及其版本环境虚拟机:VirtualBox 6.0.24 r139119 Linux:CentOS 7 Windows:Windows10 软件 JDK:Jdk1.8_131 Hadoop:Hadoop-2.6.0-cdh5.7.0 工具阅读全文

posted @ 2021-12-27 13:56 蔡地像徐坤阅读(194) 评论(0) 推荐(0)

Flume整合Kafka

摘要： Flume整合Kafka 1、背景知识一般使用Flume+Kafka架构都是希望完成实时流式的日志处理，后面再连接上Flink/Storm/Spark Streaming等流式实时处理技术，从而完成日志实时解析的目标。生产环境中，往往是读取日志进行分析，而这往往是多数据源的，如果Kafka构建多阅读全文

posted @ 2021-12-27 13:33 蔡地像徐坤阅读(305) 评论(0) 推荐(0)

Flink部署Standalone模式

摘要：安装：解压缩 flink-1.10.1-bin-scala_2.12.tgz，进入 conf 目录中。 1）修改 flink/conf/flink-conf.yaml 文件： 2）修改 /conf/slaves 文件： 3）分发给另外两台机子：启动：访问 http://localhost:80 阅读全文

posted @ 2021-12-27 13:30 蔡地像徐坤阅读(102) 评论(0) 推荐(0)

2021年12月12日

spark连接hive出现错误，javax.jdo.JDODataStoreException: Required table missing : "`DBS`" in Catalog "" Schema ""

摘要：今天入门spark,连接hive时一直报错，错误如下 21/12/12 19:55:26 ERROR Hive: Cannot initialize metastore due to autoCreate error javax.jdo.JDODataStoreException: Required 阅读全文

posted @ 2021-12-12 21:03 蔡地像徐坤阅读(802) 评论(0) 推荐(0)

hive初始化元数据报错

摘要：今天配置了hive,初始化元数据时给我报了个错我首先修改 hive/conf/hive-site.xml 配置文件，添加了serverTimezone=UTC <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:my 阅读全文

posted @ 2021-12-12 20:48 蔡地像徐坤阅读(461) 评论(0) 推荐(0)

2021年12月10日

ssh登录 The authenticity of host 192.168.0.xxx can't be established.　的问题

摘要：今天又重新配下虚拟机，我一直有个疑问，设置了ip和主机名的映射关系（vi /etc/hosts）,到ssh免密还是会出现这个看了别人的博客：https://www.cnblogs.com/huanghongbo/p/6254400.html 解决方式如下：修改/etc/ssh/ssh_confi 阅读全文

posted @ 2021-12-10 23:06 蔡地像徐坤阅读(275) 评论(0) 推荐(0)

2021年12月9日

layui简单的两个页面

摘要： layui前端代码： <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>Title</title> <link rel="stylesheet" href="/layui-v2.5.6/layui/css/la 阅读全文

posted @ 2021-12-09 18:47 蔡地像徐坤阅读(269) 评论(0) 推荐(0)

2021年12月5日

springboot整合shiro关于任务-入门3

摘要：任务异步任务~ 邮件发送~ 定时任务~timer 1.异步任务写一个AsyncService类，目的：睡眠三秒 package com.kuang.springboot09test.service; import org.springframework.scheduling.annotation 阅读全文

posted @ 2021-12-05 19:44 蔡地像徐坤阅读(67) 评论(0) 推荐(0)

公告