摘要： 1.完成对所有类型数据的爬取（包括咨询、政策、论文、会议、专利、期刊、报告） 2.对爬取到的数据进行清洗分类 3.公共数据空间部分的查询和分类展示 如果前三项完成进度快实现第四项： 4.公共空间部分拓扑图表展示 阅读全文

摘要： 一个IT系统是多角色多模块分层分级的，像OSI模型上层应用简单依赖下层支撑，SOA设计中同级角色也只看对方的接口。 各角色分工明确方便快速实现业务，但是给架构优化也埋下大坑，底层的盲目支撑是巨大资源浪费，平级调度协作也没任何弹性。前端一个小逻辑需求会导致后端大规模联动，不同服务也没权限理解对方的内存 阅读全文

摘要： CAP是每一名技术架构师都必须掌握的基础原则。现在只要是稍微大一点的互联网项目都是采用 分布式 结构了，一个系统可能有多个节点组成，每个节点都可能需要维护一份数据。那么如何维护各个节点之间的状态，如何保障各个节点之间数据的同步问题就是大家急需关注的事情了。CAP定理是分布式系统中最基础的原则。所以理 阅读全文

摘要： 在JAVA程序中，性能问题的大部分原因并不在于JAVA语言，而是程序本身。养成良好的编码习惯非常重要，能够显著地提升程序性能。 （1） 尽量在合适的场合使用单例 使用单例可以减轻加载的负担，缩短加载的时间，提高加载的效率，但并不是所有地方都适用于单例，简单来说，单例主要适用于以下三个方面： 第一，控 阅读全文

摘要： 索引的本质 MySQL官方对索引的定义为：索引（Index）是帮助MySQL高效获取数据的数据结构。提取句子主干，就可以得到索引的本质：索引是数据结构。 常见的查询算法 我们知道，数据库查询是数据库的最主要功能之一。我们都希望查询数据的速度能尽可能的快，因此数据库系统的设计者会从查询算法的角度进行优 阅读全文

摘要： SOA，它是一个面向服务的体系结构，是一个组件模型，它将应用程序的不同功能单元（称为服务）通过这些服务之间定义良好的接口和契约联系起来。接口是采用中立的方式进行定义的，它应该独立于实现服务的硬件平台、操作系统和编程语言，这使得构建在各种这样的系统中的服务可以以一种统一和通用的方式进行交互。它能够帮助 阅读全文

摘要： Java 内存模型的组成分析 内存模型概念 为了更好解决上面提到的系列问题，内存模型被总结提出，我们可以把内存模型理解为在特定操作协议下，对特定的内存或高速缓存进行读写访问的过程抽象。 不同架构的物理计算机可以有不一样的内存模型，Java 虚拟机也有自己的内存模型。 Java 虚拟机规范中试图定义一 阅读全文

摘要： SOA，它是一个面向服务的体系结构，是一个组件模型，它将应用程序的不同功能单元（称为服务）通过这些服务之间定义良好的接口和契约联系起来。接口是采用中立的方式进行定义的，它应该独立于实现服务的硬件平台、操作系统和编程语言，这使得构建在各种这样的系统中的服务可以以一种统一和通用的方式进行交互。 SOA的 阅读全文

摘要： 定时任务的需求有那么几类： 1. 如之前所说，跨服务调用，MQ通知难免会有不可达的问题，我们需要有一定的机制进行补偿。 2. 有一些业务是基于任务表进行驱动的，有关任务表的设计下面会详细说明。 3. 有一些业务是定时定期来进行处理的，根本不需要实时进行处理（比如通知用户红包即将过期，和银行进行日终对 阅读全文

摘要： 消息队列MQ的使用有下面几个好处，或者说我们往往处于这些目的来考虑引入MQ： 1. 异步处理：类似于订单这样的流程一般可以定义出一个核心流程，这个流程用于处理核心订单的状态机，需要尽快同步落库完成，然后围绕订单会衍生出一系列和用户相关的库存相关的后续的业务处理，这些处理完全不需要卡在用户点击提交订单 阅读全文