extendswind

2019年1月9日

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/hadoop_rack_awareness Hadoop会通过集群的拓扑（节点在交换机的连接形式）优化文件的存储，降低跨交换机的数据通信，使副本跨交换机以保证数据安全。但Hadoop没有默认的集群拓扑识别机制，需要使用额外的java类或脚本两种形式设置。官网上给了... 阅读全文

posted @ 2019-01-09 14:23 extendswind 阅读(1015) 评论(0) 推荐(0) 编辑

Spark设置自定义的InputFormat读取HDFS文件

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/problem_spark_reading_hdfs_serializable Spark提供了HDFS上一般的文件文件读取接口 sc.textFile()，但在某些情况下HDFS中需要存储自定义格式的文件，需要更加灵活的读取方式。使用KeyValueTextIn... 阅读全文

posted @ 2019-01-09 11:11 extendswind 阅读(2152) 评论(0) 推荐(0) 编辑

2018年11月27日

开启不折腾模式

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/from_geeker_to_no_self_inflicted 用了很长一段时间的linux，和很多人对linux相比windows的优点评价相同，linux是非常自由的操作系统。从内核到桌面环境到各个应用都可以自行定制，能够完全按照自己的喜好修改，实在没有的功... 阅读全文

posted @ 2018-11-27 21:26 extendswind 阅读(136) 评论(0) 推荐(0) 编辑

2018年11月21日

第一篇博客

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/life/blog_first 终于初步搞定了这个博客，首先吐槽：Hugo虽然自称最快，但要想找个合适的主题外加适应中文真不是一般的折腾，各种css调了半天还没达到想要的效果。只是作为一个折腾的helloworld程序员，即便有aur一键安装，也难忍搞个博客还要来一波nodejs或r... 阅读全文

posted @ 2018-11-21 11:32 extendswind 阅读(86) 评论(0) 推荐(0) 编辑

设计模式之工厂模式

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/design_patterns_factory TODO 某些思想感觉没写清楚和有重复几种工厂模式(Factory Pattern)简介工厂模式主要分为：简单工厂模式（Simple Factory Pattern）工厂方法模式（Factory Method Pat... 阅读全文

posted @ 2018-11-21 11:31 extendswind 阅读(198) 评论(0) 推荐(0) 编辑

设计模式之静态代理模式和装饰者模式

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/design_patterns_static_proxy_and_decoration 这两种模式的相似度极高，作用也类似，都是对已有的类进行包装，以添加新的控制（代理模式）和功能（装饰者模式），其实这两点也没有严格区分。两种设计模式的重点在于，已有的类（被代理、... 阅读全文

posted @ 2018-11-21 11:30 extendswind 阅读(1914) 评论(0) 推荐(0) 编辑

linux桌面发行版简介

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/linux_desktop_distribution linux系统桌面操作系统：windows，MacOS和各linux发行版。2017年数据，windows份额超过90%，MacOS约6%，Linux份额最高的记录在2016年7月创下，是2.33%。貌似用li... 阅读全文

posted @ 2018-11-21 11:30 extendswind 阅读(683) 评论(0) 推荐(0) 编辑

Hadoop HDFS 远程调试（Docker环境下的Hadoop集群）

只有注册用户登录后才能阅读该文。阅读全文

posted @ 2018-11-21 11:28 extendswind 阅读(3) 评论(0) 推荐(0) 编辑

使用u盘安装linux(manjaro)时Grub报错

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/manjaro_install_problem_grub 错误error: invalid arch-independent ELF magic.Entering rescue mode…grub rescue>使用Rufu ISO模式烧录的U盘，lagency ... 阅读全文

posted @ 2018-11-21 11:28 extendswind 阅读(2851) 评论(0) 推荐(0) 编辑

使用Python3发布博客到支持mateweblog的平台（博客园等）

摘要：本文通过MetaWeblog自动发布，原文及更新链接：https://extendswind.top/posts/technical/python3_publish_blog 用个人域名搭建的博客在百度搜索上的SEO太差，百度一直只收录主页，懒得再为这些问题折腾，直接同步到博客园算了，考虑用Python。貌似CSDN已经关闭了metawebblog接口，只在博客园上测试。Python发博客的主要... 阅读全文

posted @ 2018-11-21 11:27 extendswind 阅读(183) 评论(0) 推荐(0) 编辑

公告