2023年12月24日
Hadoop集群迁移(元数据及HDFS数据）
摘要： 1.背景 老集群采用的腾讯emr集群，使用过程中磁盘扩容成本费用高且开源组件兼容性存在问题，因此决定采用自建hadoop集群，需要将emr的元数据和hdfs基础数据迁移过来。 EMR版本：3.1.2 自建Hadoop版本：3.1.3 2.集群迁移步骤 2.1 数据迁移 nohup hadoop di 阅读全文
posted @ 2023-12-24 17:27 tuoluzhe8521 阅读(191) 评论(0) 推荐(0)
2023年12月21日
Hive和Spark生产集群搭建
摘要： hive on spark生产集群搭建，可以切换为spark-sql，同时可以用spark操纵doris 阅读全文
posted @ 2023-12-21 18:11 tuoluzhe8521 阅读(561) 评论(0) 推荐(0)
Hadoop生产集群搭建
摘要： 史上最全Hadoop实际生产集群搭建 阅读全文
posted @ 2023-12-21 17:04 tuoluzhe8521 阅读(74) 评论(0) 推荐(0)