摘要：
1.查看是否安装了mysql 安装了 2.停止mysql服务，删除之前安装的mysql 3.查看之前老版本mysql的目录，并且删除老版本mysql的文件和库 find / -name mysql 查找结果： 删除对应的mysql目录： 4.再次查找机器是否安装mysql rpm -qa | gre 阅读全文
posted @ 2019-09-08 10:52
zhangqi00
阅读(1760)
评论(0)
推荐(0)
摘要：
1.为了方便启动kafka，我们在kafka的bin目录下写2个脚本。一个是启动zookeeper集群的脚本，一个是启动kafka集群的脚本 1.1 vim start-zks.sh 启动zookeeper集群的脚本 1.1.1给该文件赋权限 chmod 777 start-zks.sh 1.1.2 阅读全文
posted @ 2019-08-20 14:17
zhangqi00
阅读(187)
评论(0)
推荐(0)
摘要：
1. kafka是一个分布式消息队列。具有高性能、持久化、多副本备份、横向扩展能力。生产者往队列里写消息，消费者从队列里取消息进行业务逻辑。一般在架构设计中起到解耦、削峰、异步处理的作用。 1.1 broker：安装了kafka服务的机器称之为broker 1.2 topic（主题）:是用来存放消息 阅读全文
posted @ 2019-08-20 10:15
zhangqi00
阅读(165)
评论(0)
推荐(0)
摘要：
1.安装kafka(单机版) 1.1上传 kafka_2.11-2.0.0.tgz 到 /root/Downloads 1.2解压 tar 包 tar -zxvf kafka_2.11-2.0.0.tgz 解压后：kafka_2.11-2.0.0 1.3删除 LICENSE、NOTICE 、site 阅读全文
posted @ 2019-08-20 09:15
zhangqi00
阅读(3859)
评论(0)
推荐(0)
摘要：
虚拟机联网步骤： 1.点击更改适配器选项 2.右击以太网--点击属性--共享--选择要共享的网卡 3.修改 ifcfg-eth0文件 vim /etc/sysconfig/network-scripts/ifcfg-eth0 注意：GATEWAY写的是本机的vmnet1的ip IPADDR写的是虚拟 阅读全文
posted @ 2019-08-19 20:58
zhangqi00
阅读(215)
评论(0)
推荐(0)
摘要：
1.分区（partitions） 分区器 partitioner hive = hdfs + mysql中的模板 我们分区是将hdfs中的数据分为多份 2.静态分区 例子，单个分区字段 创建一个temb表，分区字段 month 列与列用空格隔开 create table tem(id int,tem 阅读全文
posted @ 2019-05-12 16:23
zhangqi00
阅读(372)
评论(0)
推荐(0)
摘要：
一.克隆 1.右键--管理--克隆（注意：要在该虚拟机关闭的状态下才能克隆） 2. 3. 4. 5. 6. 7.克隆完毕 二. 修改物理地址、ip地址 1.1修改 vim /etc/udev/rules.d/70-persistent-net.rules 修改后 1.2 cd /etc/syscon 阅读全文
posted @ 2019-04-13 19:43
zhangqi00
阅读(175)
评论(0)
推荐(0)
摘要：
1.启动所有的线程服务 start-all.sh 记得要查看线程是否启动 jps 2.在根目录创建 wordcount.txt 文件 放置一些数据 3.创建 hdfs dfs -mkdir /文件夹名称 创建成功 4.将wordcount.txt文件放置 hadfs01下 放置成功 5.到如下图所示 阅读全文
posted @ 2019-04-10 21:06
zhangqi00
阅读(2380)
评论(0)
推荐(0)
摘要：
步骤 1.修改 hadoop-env.sh export JAVA_HOME=/root/Downloads/jdk1.7.0_79export HADOOP_HOME=/root/Downloads/hadoop-2.6.5 2.修改core-site.xml <property><name>fs 阅读全文
posted @ 2019-04-09 20:33
zhangqi00
阅读(276)
评论(0)
推荐(0)
浙公网安备 33010602011771号