摘要：
传统的数据开发流程 开发人员通过公共账号登录安装了Hive、Hadoop客户端的gateway机器； 编写自己的脚本，调试代码，完成后通过crontab配置脚本定时执行； 为了防止脚本被其他同事修改，一些谨慎的同事会在每次开发完自己的脚本后同步一份到本机，后面为了实现版本控制，把脚本同步到了git； 阅读全文
摘要：
架构设计思维 架构思维中的分解和集成是随着系统的演化进行演化，从单体架构到ESB为代表的SOA架构再到现在流行的微服务，集成方式也从直接依赖到ESB为枢纽再到多种形式存在的微服务集成，接下来我们就来解决微服务中集成的方式有哪些。 单体架构 Web应用程序发展的早期，在开发服务端企业应用时，应用需要支 阅读全文
摘要：
云计算的软件架构层 通过对现在云计算的整体分析，可以发现其软件架构分为三层，分别是核心服务层、服务管理层以及用户访问层，核心服务层是云 计算软甲你的中心，主要是对于系统中的硬件、软件以及应用程序进行融合，然后在呈现给客户，具有一定的多样性与稳定性，也需要适应各种应用程序；服务管理层是对于核心服务层的 阅读全文
摘要：
分布式架构知识 本文力求从分布式基础理论，架构设计模式，工程应用，部署运维，业界方案这几大方面，介绍基于MSA(微服务架构)的分布式的知识体系大纲。从而对SOA到MSA进化有个立体的认识，从概念上和工具应用上更近一步了解微服务分布式的本质，身临其境的感受如何搭建全套微服务架构的过程。 SOA到MSA 阅读全文
摘要：
CAP定理是分布式系统中最基础的原则。所以理解和掌握了CAP，对系统架构的设计至关重要。 「 CAP定理 」又被称为 布鲁尔定理，它提出对于一个分布式系统而言，不能同时满足以下三点： Consisteny（一致性） Availability（可用性） Partition tolerance（分区容错 阅读全文
摘要：
三架马车是指微服务、消息队列和定时任务。如下图所示，这里是一个三驾马车共同驱动的一个立体的互联网项目的架构。不管项目是大是小，这个架构模板的形态一旦定型了之后就不太会变，区别只是我们有更多的服务有更复杂的调用，更复杂的消息流转，更多的Job，整个架构整体是可扩展的，而且不会变形，这个架构可以在很长的 阅读全文
摘要：
本次主要介绍苏宁支付系统如何实现500天性能提升2000倍，从100笔/秒提升到20万笔/秒，给飞行中的飞机换引擎，将包括三大章节六个部分： 苏宁支付平台发展历程，以及现在运行的总体架构设计，以及配套的可视化作战指挥系统，以及在业务急速变化，万亿级交易量的状态下，如何对全局架构进行优雅地重构， 具体 阅读全文
摘要：
本问是关于架构层级SOLID原则的文章，在类的层级，开闭原则（the-Open-Closed-Principle，简称OCP原则）的含义是：一个类对扩展是“开”放的，而对变更是封“闭”的，意思是说，应该在不改变类的前提下扩展一个类的行为。而通常的方式是继承和多态。 在架构层级，我们并不会变更系统的一 阅读全文
摘要：
本次阅读到一篇关于微博的深度学习的架构，觉得很有益处，现记录下来，希望有所帮助。 深度学习框架是进行深度学习的工具。简单来说，一套深度学习框架就是一套积木，各个组件就是某个模型或算法；开发者通过简单设计和组装就能获得自己的一套方案。深度学习框架的出现降低了深度学习门槛。开发者不需要编写复杂的神经网络 阅读全文