摘要:
Linux中,rm put.txt是恢复不出来的 hdfs中,hadoop fs -rm /user/hadoop-twq/cmd/put.txt恢复不出来 如果想要删完之后还可以找到,hdfs提供了trash机制(默认是关闭的) 需要在core-site.xml配置: <property> <na 阅读全文
posted @ 2019-02-27 16:16
AntarcticPenguin
阅读(695)
评论(0)
推荐(0)
摘要:
在master上以hadoop-twq用户登录 cd ~、ls / 查看HDFS文件目录: hadoop fs -ls hdfs://master:9999/(当前还没有文件) 效果等同于:hadoop fs -ls / 效果也等同于:hdfs dfs -ls / 在这个根目录创建一个文件或目录: 阅读全文
posted @ 2019-02-27 16:13
AntarcticPenguin
阅读(6810)
评论(0)
推荐(0)
摘要:
5PB甚至更大的数据集怎么存储 ? 1PB = 1024TB、1TB = 1024GB、1GB = 1024M 假设我们将数据块的大小定义成256M, 那么5PB的数据集可以划分成20971520左右的数据块, 这些数据块可以均匀分布在1000台机器节点(每个节点假设空间为10TB上 一台机器死了怎 阅读全文
posted @ 2019-02-27 16:10
AntarcticPenguin
阅读(4953)
评论(0)
推荐(0)

浙公网安备 33010602011771号