大数据架构总体设计与架构哲学本质 各种配置 java项目架构 有用 看2

-----

 

 

 

  -----

 

  -----

 

 

  -----

 

  -----

 

 

 

 

 

 

  -----

 幂等可以通过在表上加上version字段解决

 

 

  -----

 

 

 

 

 

 

 

 

 -----

 

  -----

 

 

 

 

 

-----

 

 -----

 

 -----

 

 

 

 

 

 -----

 

 

 

 

  -----

 

 

 

 

  -----

 

 

 

 namenode日志写磁盘底层采用双缓冲方案

 -----

 

  -----

 纠删码功能可以使hdfs不需要3个副本，仅通过一个文件就可以做容灾恢复

 

  -----

 

 

  -----

 

 

  -----

 

 -----

 

 

 

 

 

 -----

 

 -----

 

 

 -----

 

 -----

 

-----

 

 

 

 -----

 

 

 

 -----

 

 

 

 

  -----

 

  -----

 调成65536

 

 

 

  -----

 

  -----

 

 

  -----

 

  -----

 

 

 

  -----

 

 

 

  -----

 

 

  -----

 

 

  -----

 

 

 

 

  -----

 

 

  -----

 

 

 

 

 

 

 

 

 

 

 

 

  -----

  -----

 多租户配置

 

 

 

 

 

 

 

 

 

 

 

 

 

  -----

 

 

 

  -----

 

 

 

 

 

 

 

 

 

 

 

 

  -----

 

 

 

 

 

 

 

  -----

 

 

 

 

 

 

  -----

 

 

 

 

 

 

  -----