武子康 - 博客园

2024年8月1日

LLM-02 大模型本地部署运行 ChatGLM3-6B(13GB) 双卡2070Super8GB 环境配置单机多卡基于LLM-01章节继续乘风破浪为大模型微调做准备原创

摘要：官方介绍 ChatGLM3-6B 是 ChatGLM 系列最新一代的开源模型，在保留了前两代模型对话流畅、部署门槛低等众多优秀特性的基础上，ChatGLM3-6B 引入了如下特性：更强大的基础模型： ChatGLM3-6B 的基础模型 ChatGLM3-6B-Base 采用了更多样的训练数据、更充阅读全文

posted @ 2024-08-01 17:58 武子康阅读(0) 评论(0) 推荐(0)

Hadoop-10-HDFS集群 Java实现MapReduce WordCount计算 Hadoop序列化编写Mapper和Reducer和Driver 附带POM 详细代码图文等内容原创

摘要：章节内容上一节我们完成了：新工程的建立和 POM 的导入Java连接到HDFS集群Java操作HDFS集群，如上传下载，遍历目录，PUT GET 等等操作背景介绍这里是三台公网云服务器，每台 2C4G，搭建一个Hadoop的学习环境，供我学习。之前已经在 VM 虚拟机上搭建过一次，但是没阅读全文

posted @ 2024-08-01 10:00 武子康阅读(0) 评论(0) 推荐(0)

大数据-60 Kafka 高级特性消息消费01-消费组图例心跳机制图例附参数详解与建议值原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka（正在更新…）章节内容上阅读全文

posted @ 2024-08-01 09:07 武子康阅读(0) 评论(0) 推荐(0)

大数据-59 Kafka 高级特性消息发送03-自定义拦截器、整体原理剖析原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka（正在更新…）章节内容上阅读全文

posted @ 2024-08-01 08:55 武子康阅读(0) 评论(0) 推荐(0)

2024年7月31日

大数据-58 Kafka 高级特性消息发送02-自定义序列化器、自定义分区器 Java代码实现原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka（正在更新…）章节内容上阅读全文

posted @ 2024-07-31 09:45 武子康阅读(0) 评论(0) 推荐(0)

2024年7月30日

大数据-56 Kafka SpringBoot与Kafka 基础简单配置和使用 Java代码 POM文件原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka （正在更新…）章节内容阅读全文

posted @ 2024-07-30 09:49 武子康阅读(0) 评论(0) 推荐(0)

大数据-55 Kafka sh脚本使用与 JavaAPI使用 topics.sh producer.sh consumer.sh kafka-clients 原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka （正在更新…）章节内容阅读全文

posted @ 2024-07-30 09:37 武子康阅读(0) 评论(0) 推荐(0)

2024年7月29日

大数据-54 Kafka 安装配置环境变量配置启动服务 Ubuntu配置 ZooKeeper 原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka （正在更新…）章节内容阅读全文

posted @ 2024-07-29 09:12 武子康阅读(0) 评论(0) 推荐(0)

大数据-53 Kafka 基本架构核心概念 Producer Consumer Broker Topic Partition Offset 基础概念了解原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka （正在更新…）章节内容阅读全文

posted @ 2024-07-29 08:55 武子康阅读(0) 评论(0) 推荐(0)

2024年7月27日

大数据-51 Redis 高可用方案CAP-AP 主从复制一主一从全量和增量同步哨兵模式 docker-compose测试原创

摘要：点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （正在更新…）章节内容上节我们完成了： Re 阅读全文

posted @ 2024-07-27 08:49 武子康阅读(0) 评论(0) 推荐(0)

公告