摘要:Zookeeper是针对大型分布式系统的高可靠的协调系统。它基于对Paxos算法的实现,使该框架保证了分布式环境中数据的强一致性,也正是基于这样的特性,使得ZooKeeper解决很多分布式问题。把分布式集群当成zoo,那么zookeeper就是管理员。zookeeper本身也可以是个集群,通过几台follow机器选举leader。zookeeper的主要作用包括,命名服务,配置管理,分布式一致性锁,HA(High available)。真是因为zookeeper在分布式系统领域如此重要,可以说是基石,所以我们绕不开要学习其使用及原理。本文基于Ubuntu 16.04 LTS,介绍如何搭建1主2从的zookeeper集群。 阅读全文
posted @ 2021-02-27 15:22 JasonCeng 阅读(248) 评论(0) 推荐(2) 编辑
摘要:本文主要记录笔者在使用frp实现内网穿透访问内网多台Linux服务器的全过程,包括公网服务器的配置、frp服务端、客户端的下载与配置,以及配置systmctl来实现系统级启停frp,并记录我遇到的一些问题。希望对大家有所帮助。 阅读全文
posted @ 2021-02-04 21:35 JasonCeng 阅读(85) 评论(0) 推荐(0) 编辑
摘要:As we all know, Go是一门注重简单、可靠、高效的编程语言。它比其他语言都简单,所以学起来更快。今天我们就尝试在Windows下搭建Go开发环境!本文带领大家一步步搭建Go环境,并介绍GoLand这个IDE的安装及激活流程。 阅读全文
posted @ 2021-01-12 22:31 JasonCeng 阅读(174) 评论(2) 推荐(0) 编辑
摘要:最近在Hive中使用Spark引擎进行执行时(`set hive.execution.engine=spark`),经常遇到`return code 30041`的报错,为了深入探究其原因,阅读了官方issue、相关博客进行了研究。下面从报错现象、原因分析、解决方案几个方面进行介绍,最后做一下小结。 阅读全文
posted @ 2021-01-05 20:32 JasonCeng 阅读(1365) 评论(0) 推荐(0) 编辑
摘要:本文介绍如何在windows下搭建Hive开发环境,主要依赖的环境是Java和Hadoop,其他大部分工作主要是动手配置的工作,按照下面的介绍一步步操作即可完成搭建。 阅读全文
posted @ 2021-01-02 23:03 JasonCeng 阅读(97) 评论(0) 推荐(0) 编辑
摘要:数据库系统是软件领域的重要基础设施,而SQL优化器又是其重要组成部分。本文主要是对两个查询优化器,RBO: Rule-Based Optimization“基于规则的优化器”和CBO: Cost-Based Optimization“基于代价的优化器”进行概述性介绍。 阅读全文
posted @ 2020-12-27 22:46 JasonCeng 阅读(1228) 评论(0) 推荐(1) 编辑
摘要:众所周知,微软官方推出的开源编辑器VSCode轻量、易用、美观(微软没有给我广告费哈^_^),在程序员界享有盛誉,今天就带着大家在Linux下快速下载并使用VCode编辑器。 阅读全文
posted @ 2020-12-24 07:51 JasonCeng 阅读(250) 评论(0) 推荐(0) 编辑
摘要:如果我们只有一台笔记本,又想要搭建一个小集群,怎么办?虚拟机帮你实现梦想,市面上较为常用的虚拟机软件有VMware、VirtualBox、Xen、KVM、hyper-v等,本文主要介绍如何在Linux下安装VMware,以为后续开启多个虚拟机,搭建小集群做准备。 阅读全文
posted @ 2020-12-24 06:52 JasonCeng 阅读(1494) 评论(2) 推荐(0) 编辑
摘要:在Ubuntu16.04下安装截图工具的过程中发现PPA这个概念,于是进行了系统的学习,本文介绍PPA的概念、优势及使用方法。 阅读全文
posted @ 2020-12-20 23:03 JasonCeng 阅读(283) 评论(0) 推荐(0) 编辑
摘要:记录我在为SSD+机械硬盘的笔记本上安装Ubuntu16.04的全过程,主要是介绍手工分区需要注意的细节。 阅读全文
posted @ 2020-12-20 16:01 JasonCeng 阅读(281) 评论(0) 推荐(0) 编辑