2024年3月
HDFSRPC安全认证Token篇推广
摘要： 本文主要阐述HDFSRPC安全认证相关的实现。主要介绍Token相关的实现。 写在前面 相关blog https://blog.csdn.net/hncscwc/article/details/124722784 https://blog.csdn.net/hncscwc/article/detai 阅读全文
posted @ 2024-03-22 09:31 zfpigpig 阅读(31) 评论(0) 推荐(0)
HDFSRPC安全认证Kerberos篇推广
摘要： 本文主要阐述HDFSRPC安全认证相关的实现。主要介绍Kerberos相关的实现。 写在前面 相关blog可以先看一下 https://segmentfault.com/a/1190000039085046?sort=newest https://blog.csdn.net/qq_35995514/ 阅读全文
posted @ 2024-03-19 09:47 zfpigpig 阅读(37) 评论(0) 推荐(0)
HDFSDATANODE数据传输详解
摘要： 本文主要阐述datanode中一个socket连接接收字节流的构成，帮助datanode的接收与处理数据。注意hadoop版本为3.1.1。 写在前面 Datanode本质上也是TCPServer，一般的TCPServer接到客户端请求以后会分配一个线程处理，对于Datanode而言，这个线程可以叫 阅读全文
posted @ 2024-03-17 09:18 zfpigpig 阅读(112) 评论(0) 推荐(0)
HDFSRPC协议详解
摘要： 本文主要阐述HDFSRPCserver端一个socket连接接收字节流的构成，帮助读者理解HDFSRPC协议。注意hadoop版本为3.1.1。 阅读全文
posted @ 2024-03-14 09:34 zfpigpig 阅读(53) 评论(0) 推荐(0)
dfs.permissions.superusergroup详解
摘要： 此参数主要是配置hdfs的超级部门，默认值是supergroup。 这个参数主要在FSNamesystem类中用于创建root目录。 PermissionStatus createFsOwnerPermissions(FsPermission permission) { return new Per 阅读全文
posted @ 2024-03-12 14:45 zfpigpig 阅读(122) 评论(0) 推荐(0)