上一页 1 ··· 17 18 19 20 21 22 23 24 25 ··· 45 下一页
摘要: 1、kafka 1.1、kafka介绍 ​ kafka是最初由linkedin公司开发的,使用scala语言编写,kafka是一个分布式,分区的,多副本的,多订阅者的消息队列系统。 1.2、kafka相比其他消息队列的优势 常见的消息队列:RabbitMQ,Redis ,zeroMQ ,Active 阅读全文
posted @ 2023-12-29 17:29 业余砖家 阅读(291) 评论(0) 推荐(0)
摘要: 问题描述:在linux云服务器上搭建了一套kafka3.0集群,然后按照以前的创建topic指令: ./kafka-topics.sh --zookeeper hadoop01:2181,hadoop02:2181,hadoop03:2181 --replication-factor 1 --par 阅读全文
posted @ 2023-12-28 17:31 业余砖家 阅读(715) 评论(0) 推荐(0)
摘要: 一、kafka是什么? Kafka是一个快速、可扩展的、高吞吐、可容错的分布式发布订阅消息系统。Kafka具有高吞吐量、内置分区、支持数据副本和容错的特性,它可以处理消费者规模的网站中的所有动作流数据,具有高性能、持久化、多副本备份、横向扩展能力,适合在大规模消息处理场景中使用。 (1) 分布式系统 阅读全文
posted @ 2023-12-28 10:25 业余砖家 阅读(94) 评论(0) 推荐(0)
摘要: 1.数据集下载 TPC-H数据集: https://github.com/gregrahn/tpch-kit 2.解压安装 unzip tpch-kit-master.zip cd tpch-kit-master/dbgen/ make -f Makefile 通过上面命令,生成两个文件,分别是db 阅读全文
posted @ 2023-12-27 18:45 业余砖家 阅读(701) 评论(0) 推荐(0)
摘要: 笼统的说,Hive中的Join可分为Common Join(Reduce阶段完成join)和Map Join(Map阶段完成join)。本文简单介绍一下两种join的原理和机制。 一 .Common Join 如果不指定MapJoin或者不符合MapJoin的条件,那么Hive解析器会将Join操作 阅读全文
posted @ 2023-12-22 15:45 业余砖家 阅读(2373) 评论(0) 推荐(0)
摘要: IT小神博客: http://www.itxiaoshen.com/ SegmentFault: https://segmentfault.com/blogs 阅读全文
posted @ 2023-12-08 18:14 业余砖家 阅读(21) 评论(0) 推荐(0)
摘要: (一)格式化XML 1、安装XML Tools 在notepad++中点击菜单栏【插件】-【插件管理】。 在插件管理界面选择【XML Tools】,点击【安装】。 2、打开XML文件 在notepad++中点击菜单栏【文件】-【打开】。 3、选择格式化XML 全选XML字符串,点击【插件】-【XML 阅读全文
posted @ 2023-11-27 16:58 业余砖家 阅读(6692) 评论(0) 推荐(0)
摘要: Win11系统hosts文件无法修改保存 新近使用win11新电脑修改hosts,添加IP和主机名映射,保存时提示host无法修改。 解决办法: 1、将hosts文件的权限“只读”勾选去掉。 进入hosts文件目录:C:\Windows\System32\drivers\etc,右键点击hosts文 阅读全文
posted @ 2023-11-27 15:17 业余砖家 阅读(2739) 评论(0) 推荐(1)
摘要: 方法1:使用查看中的撰(zhuàn)写栏 (1)、查看→撰写→撰写栏。 (2)、底部可以看到“撰写栏”,选择全部会话。 (3)、在撰写栏输入命令,回车后就会发送到所有会话窗口。 方法2:使用工具中的发送键输入到所有会话 (1)、工具→发送键输入到(K)→所有会话(A)。 (2)、当窗口上面出现黄色栏 阅读全文
posted @ 2023-11-24 18:13 业余砖家 阅读(5472) 评论(0) 推荐(1)
摘要: 一、Kafka的介绍 (一)、概述 1、Kafka是由LinkedIn开发的一个分布式的消息系统,底层使用Scala编写,它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。 2、Kafka是一个分布式 阅读全文
posted @ 2023-11-24 16:16 业余砖家 阅读(150) 评论(0) 推荐(0)
上一页 1 ··· 17 18 19 20 21 22 23 24 25 ··· 45 下一页