摘要：
HDFS 集群的性能瓶颈中，常常会听到“小文件太多”类似的描述。
为什么太多的小文件会影响 HDFS 的性能呢？解决方案之【合并小文件】也一起来学学吧💪 阅读全文
posted @ 2021-06-20 17:50
瘦风
阅读(1736)
评论(0)
推荐(0)
摘要：
通过 HDFS 的 Java API，读写 HDFS 中的文件，包括创建目录、写文件、上传下载文件，遍历文件，访问权限控制等等。 阅读全文
posted @ 2021-06-12 21:26
瘦风
阅读(2068)
评论(0)
推荐(1)
摘要：
Windows 的 IDEA 中运行 Hadoop 或 Spark 程序总是报错：Could not locate executable null\bin\winutils.exe in the Hadoop binaries. 要怎么解决呢？ 阅读全文
posted @ 2021-06-09 13:03
瘦风
阅读(5105)
评论(0)
推荐(0)
摘要：
HDFS 的元数据如何保存？FSImage 和 EditLog 如何合并？Checkpoint 的过程又是怎样的？ 阅读全文
posted @ 2021-06-06 14:18
瘦风
阅读(2871)
评论(0)
推荐(1)
摘要：
理解和认识世界，了解自己的特质，找准赛道，然后不断精进自己，跨越一个又一个边界……这也许是一个「捷径」。 阅读全文
posted @ 2021-05-22 15:52
瘦风
阅读(176)
评论(0)
推荐(0)
摘要：
年轻的时候，投资自己才是收益最大的事情。 阅读全文
posted @ 2021-04-26 08:23
瘦风
阅读(356)
评论(2)
推荐(1)
摘要：
知识的传递和碰撞，过程慢热，需要足够的耐心和定力。所以我决定对书中每位大佬的无私分享，做一个简单的记录和发散，以此来锤炼自己的耐心和定力。 阅读全文
posted @ 2021-04-18 18:34
瘦风
阅读(349)
评论(0)
推荐(0)
摘要：
在 Linux 或 macOS 中要查看 RPM 包中的文件是否得到了更新，但并不想安装它，要怎么办呢？cpio 工具可以做到，快来看看✌️ 阅读全文
posted @ 2021-03-03 14:35
瘦风
阅读(4030)
评论(0)
推荐(0)
摘要：
HDFS 的写入和读取过程，是一个面试必备的问题。你能说说这两个操作的详细流程吗？写入或读取过程中发生异常，HDFS 是怎样处理的呢？ 阅读全文
posted @ 2021-03-01 08:41
瘦风
阅读(1001)
评论(0)
推荐(0)
摘要：
HDFS 的副本机制是什么？它的机架感知机制（策略）又是什么？还有负载均衡机制呢？
这几个机制都是面试都常见问题，一定要知道哦😯 阅读全文
posted @ 2021-02-20 08:45
瘦风
阅读(1083)
评论(0)
推荐(1)
摘要：
在 macOS 系统上搭建 HDFS 单机环境，用来开始大数据练习。 阅读全文
posted @ 2021-02-18 13:02
瘦风
阅读(2416)
评论(0)
推荐(1)
摘要：
HDFS 是什么？它的适用场景有哪些？它的基础架构是什么样的？常说的 NameNode 和 DataNode 分别有什么作用？ 阅读全文
posted @ 2021-02-11 15:08
瘦风
阅读(1298)
评论(0)
推荐(0)
摘要：
如何查看Linux电脑的CPU个数，核数，逻辑CPU数？ 阅读全文
posted @ 2021-02-08 10:31
瘦风
阅读(13325)
评论(0)
推荐(0)
摘要：
我为什么会坚持在年底离职？
鹅厂的面试难不难，会问哪些问题？
这篇文章做个简单的复盘，欢迎大家来留言交流👏 阅读全文
posted @ 2021-02-06 15:43
瘦风
阅读(10680)
评论(11)
推荐(9)
摘要：
2020年3月到2020年12月，我在华为 OD 待了共275天。
华为 OD 有 HR 说得那么好吗？有网络上其他人说得那么差吗？在华为 OD 工作到底是什么样的体验？
希望这篇文章能给你提供一些参考。欢迎评论区交流啊😄 阅读全文
posted @ 2021-01-24 23:18
瘦风
阅读(62500)
评论(48)
推荐(12)
浙公网安备 33010602011771号