摘要：
搭建SolrCloud模式的集群，使用内置的Jetty运行 一、硬件环境 假设有4台机，IP及主机名如下： 192.168.100.105 c1 192.168.100.110 c2 192.168.100.115 c3 192.168.100.120 c4 二、软件环境 操作系统：Ubuntu S 阅读全文
posted @ 2021-11-25 20:22
Clotho_Lee
阅读(1154)
评论(0)
推荐(0)
摘要：
Ubuntu新版没有chkconfig命令，且安装sysv-rc-conf会报以下错误： E: Unable to locate package sysv-rc-conf 经排查，发现是因为我配置了阿里云的源，该源没有集成sysv-rc-conf的安装包。 解决方法： 先登录root账号，然后编辑s 阅读全文
posted @ 2021-11-25 19:58
Clotho_Lee
阅读(957)
评论(0)
推荐(0)
摘要：
1.下载 8、9、10版本，三选一 https://tomcat.apache.org/download-10.cgi https://tomcat.apache.org/download-90.cgi https://tomcat.apache.org/download-80.cgi 下载Bina 阅读全文
posted @ 2021-11-24 16:24
Clotho_Lee
阅读(524)
评论(0)
推荐(0)
摘要：
简介 ZooKeeper - 分布式协调服务，负责为其它平台提供高可用(HA)的管理服务 Hadoop - 大数据文件系统+并行计算，包含HDFS、Map-Reduce、Yarn HBase - 基于Hadoop的列数据库 Flume - 消息队列，多数使用其作为接收端 Kafka - 消息队列，多 阅读全文
posted @ 2021-11-23 03:46
Clotho_Lee
阅读(785)
评论(0)
推荐(0)
摘要：
1.启动Kafka kafka-server-start.sh -daemon /kafka/config/server.properties 2.停止Kafka kafka-server-stop.sh 3.创建topictopic名是clotho，分区6个，副本3个 kafka-topics.s 阅读全文
posted @ 2021-11-23 02:12
Clotho_Lee
阅读(110)
评论(0)
推荐(0)
摘要：
命名描述语法 help ‘命名名’ 查看命令的使用描述 help ‘命令名’ whoami 我是谁 whoami version 返回hbase版本信息 version status 返回hbase集群的状态信息 status table_help 查看如何操作表 table_help create 阅读全文
posted @ 2021-11-23 01:53
Clotho_Lee
阅读(56)
评论(0)
推荐(0)
摘要：
如何确定topic需要多少个partition 一般情况是数据吞吐决定，这里的吞吐的单位是MB/s，这里暂时不考虑kafka服务端的单partition的吞吐瓶颈，而是考虑Producer和Consumer两端的吞吐 Producer 生产者的吞吐和以下几个配置有关： batching size c 阅读全文
posted @ 2021-11-23 01:35
Clotho_Lee
阅读(396)
评论(0)
推荐(0)
摘要：
在IDEA中使用maven-assembly-plugin插件时会提示“Plugin 'maven-assembly-plugin:' not found” 解决方法： File -> Setting -> Build, Execution, Deployment -> Build Tools -> 阅读全文
posted @ 2021-11-23 00:23
Clotho_Lee
阅读(5424)
评论(0)
推荐(1)
摘要：
一、硬件环境 假设有4台机，IP及主机名如下： 192.168.100.105 c1 192.168.100.110 c2 192.168.100.115 c3 192.168.100.120 c4 假设全部大数据组件都部署在/home/目录，Kafka的topic名是clotho 数据流图如下： 阅读全文
posted @ 2021-11-22 23:02
Clotho_Lee
阅读(218)
评论(0)
推荐(0)
摘要：
1.count命令 hbase shell hbase:>count '表名' 2.hbase.RowCounter包 hbase org.apache.hadoop.hbase.mapreduce.RowCounter '表名' 该工具是Map-Reduce程序，配置文件/hadoop/etc/h 阅读全文
posted @ 2021-11-22 19:01
Clotho_Lee
阅读(331)
评论(0)
推荐(0)
浙公网安备 33010602011771号