02 2025 档案
摘要:先讲背景故事 假设你有一个巨型数据工厂(Hadoop集群),早期版本中只有一种车间(MapReduce车间),这个车间既要搬货(资源管理)又要加工零件(数据处理)。结果出现两个问题: 车间主任同时管搬运工和技工,效率低下 只能生产一种产品(无法运行Spark等其他程序) 于是Hadoop在2012年
        阅读全文
            
摘要:1. 心跳机制是什么? 心跳机制应该是一种通信机制,可能涉及到节点之间的消息发送和接收。 节点A定期发送心跳给节点B,节点B收到后回复确认,或者节点B在一定时间内没有收到心跳就认为A宕机。然后,考虑各种异常情况,比如网络延迟、丢包、节点突然宕机等。 下面思考心跳机制是如何应对的。 2. 心跳机制的思
        阅读全文
            
 
                    
                     
                    
                 
                    
                 
         浙公网安备 33010602011771号
浙公网安备 33010602011771号