wu2198

摘要： ABHISHEK A. HEMRAJANI 云 + Enterprise 项目经理 我们最近发布了微软的灾难恢复即服务 (DRaaS) 产品的预览版 - Azure SiteRecovery。此产品可以提供自动化保护、异步持续复制，并可以在跨企业站点以及私有云,或直接在Windows ... 阅读全文

摘要： ABHISHEK A. HEMRAJANI 云 + Enterprise项目经理 自我们宣布发布使用 Azure SiteRecovery 灾难恢复至 Azure的功能预览版以来，这几个月着实令人兴奋不已。我们的客户正在亲身体验 ASR 的功能，可直接向 Windows Azure进行... 阅读全文

摘要： 前几天发生个很有意思的事情。就是在我的博客被各大不知名的所谓聚合网站收录后，某个比较畅销的技术书籍竟然也引用了我其中一篇博客。这个细节就不详细讲了。大概就是我讲了一件事情，角度还算是新颖，绝对是原创；然后其中有两个非常重要的地方漏掉了，那边博客是半年前写的，当时对于这块知识的确是掌握的不充分。然后... 阅读全文

摘要： 首先介绍一下需要实现的接口。框架的类图如图所示（今天CSDN抽风，竟然上传不了图片。如果需要实现新的Shuffle机制，那么需要实现这些接口。1.1.1 org.apache.spark.shuffle.ShuffleManagerDriver和每个Executor都会持有一个ShuffleMa... 阅读全文

摘要：  发布于 2014-12-29 作者 刘 天栋 2014年12月18日，InfoQ在京召开开放物联网大会（Open IOT Conference），微软开放技术（中国）资深项目经理陈岭在大会中针对“物联网基础架构：设备接入与大数据分析”，其中包括了微软（中国）云计算事业部于12月18日... 阅读全文

摘要：  发布于 2014-12-24 作者 陈 忠岳 在前几期为各位介绍了大数据应用主题以及开发运营主题的各类镜像后，这次我们精选了 VM Depot 站点中分布式计算相关主题的虚拟机镜像和大家一起分享。这些技术框架全部来自国内优秀的开源社区，相信熟悉这个领域的朋友不会对此感到陌生。 当然，首... 阅读全文

摘要： 在Spark 1.2.0中，Spark Core的一个重要的升级就是将默认的Hash Based Shuffle换成了Sort Based Shuffle，即spark.shuffle.manager 从hash换成了sort，对应的实现类分别是org.apache.spark.shuffle.h... 阅读全文

摘要： 正在细读Shuffle和Storage， network的源码。过几天会将相关的成果奉献给大家。正如您看到我博客的侧边栏和下边栏，我正在家2014博客之星的评选，感谢各位的支持。现在已经是第8名。已经超过400票了。谢谢大家。这个元旦很忙，一直在查阅资料，一直在画图；感谢老婆，使用ppt帮我画了很... 阅读全文

摘要： 我的400多位CSDN粉丝们，大家动一下鼠标给我投一票吧。衔接： http://vote.blog.csdn.net/blogstar2014/details?username=anzhsoft2008#content 对于非粉丝并且未登录的，可以使用QQ，微博，linkedin, google,... 阅读全文

摘要： 最近在做系统升级，由于当时设计的局限，导致系统不停服，保证服务的做法非常麻烦。当时再定方案的时候，由于自己在这方面没有经验，导致有些乐观。到了实际做的时候，预期时间至少比预想的多了一周的时间，要知道，在互联网公司，一周的时间是个非常长的时间。而这一周，还包括了OT。在这里总结一下分布式系统设计的大... 阅读全文