Lucene搜索引擎+HDFS+MR完成垂直搜索
介于上一篇的java实现网络爬虫基础之上，这一篇的思想是将网络收集的数据保存到HDFS和数据库（Mysql）中；然后用MR对HDFS的数据进行索引处理，处理成倒排索引；搜索时先用HDFS建立好的索引来搜索对应的数据ID，根据ID从数据库中提取数据，呈现到网页上。 这是一个完整的集合网络爬虫、数据库、 ...
node.js 事件循环
node.js是单线程的应用程序，但是他可能通过event和callback来支持并发。所有的node.js都是单线程的，也是异步的，他们使用调用异步函数来维持高并发。Node使用观察者模式。Node的线程会保持一个事件循环，当有任务完成时，他会触发相应的事件，通知事件监听函数执行。 事件驱动程序 ...
<未来世界的幸存者> 读后感（现实篇和职业篇）
摘要： 前几天有幸看到阮老师的 ，花了几晚的时间阅读完毕,内心受到了很大的触动，现在将感觉不错的地方记录下。 职业篇 1. 为什么雇佣制度对工人不利？ 2. 母鸡与前端工程师 3. 你的命运不是一头骡子 4. 为什么退休金是靠不住的 5. 45岁以后的人生 6. 你的B计划在哪里？ 总结： 职业篇更 ...
浅析MySQL中的Index Condition Pushdown (ICP 索引条件下推)和Multi-Range Read（MRR 索引多范围查找）查询优化
本文出处：http://www.cnblogs.com/wy123/p/7374078.html（保留出处并非什么原创作品权利，本人拙作还远远达不到，仅仅是为了链接到原文，因为后续对可能存在的一些错误进行修正或补充，无他） ICP优化原理 Index Condition Pushdown (ICP) ...
位图与布隆及大数据处理题型分析
1.位图 由题引入： 【腾讯】：2.给40亿个不重复的无符号整数，没排过序。给一个无符号整数，如何快速判断一个数是否在这40亿个数中。 如果将40亿个数按整型放入内存，显然不科学，就算内存足够，这样做也是浪费空间。 解决思路：用一个比特位表示一个数，存在的话该位上就置为1，不在的话置为0；这样40亿 ...
怎样做才是最优雅方式切换 web 项目数据源 ？
随着业务变迁/需求变更，JavaEE 应用中会被迫连接多个数据源进行业务处理。 怎样在不影响原有项目结构的情况下，已最优雅/最简洁的方式动态切换数据源呢？ 本文已一次添加数据源后动态切换实践为例，描述整个思考和实践过程，文中如有纰漏，还望指正。 1. 依赖 Spring 动态数据源实现 Spring ...
hadoop生态圈列式存储系统--kudu介绍及安装配置
介绍 Kudu 是一个针对 Apache Hadoop 平台而开发的列式存储管理器。Kudu 共享 Hadoop 生态系统应用的常见技术特性: 它在 commodity hardware（商品硬件）上运行，horizontally scalable（水平可扩展），并支持 highly availab ...
bouncycastle 国密SM2 API的使用
本文不对SM2做过多的介绍，主要介绍java bouncycastle库关于SM2的相关API的使用及注意事项 1. SM2 签名： 注意： 1）签名格式ASN1（描述了一种对数据进行表示、编码、传输和解码的数据格式），包括两个大整数。 2）注意USER_ID的一致性（规范默认是"123456781 ...
React Native 系列(九) -- Tab标签组件
前言 本系列是基于 版本号 写的。很多的 都使用了 标签组件，例如 ，`微信 RN Tab`标签组件。 标签 什么是 标签？(ps:我是这样叫的)，就拿微信来说吧，底部有4个选项卡，点击不同的按钮切换不同的内容。 在 中有两个组件负责实现这样的效果，它们是: "TabBarIOS" "TabNavi ...
白话ASP.NET MVC之三：Controller是如何解析出来的
我们在上一篇文章中介绍Controller激活系统中所涉及到的一些类型，比如有关Controller类型的相关定义类型就包括了IController类型，IAsyncController类型，ControllerBase抽象类型和我们最终要使用的抽象类型Controller，这是ASP.NET MV ...
Docker 搭建开发环境
本文介绍如何将Docker集成到开发环境，自动构建应用，并使容器拥有独立的内网IP为开发人员提供服务。 术语解释 Docker镜像：一个不可修改的"模板"，每个代码版本对应一个镜像版本，本身不可运行。 Docker容器：镜像的"实例"，必须且只能指定一个"镜像"来创建容器，创建时可选择要暴露的内部接 ...
animate.css的使用
前面的话 animate.css是一个使用CSS3的animation制作的动画效果的CSS集合，里面预设了很多种常用的动画，且使用非常简单。本文将详细介绍animate.css的使用 引入 animate.css的最新版本是3.5.2，引入animate.css很容易，有以下几种方法 1、从官网下 ...
shader之半兰伯特漫反射
Unity shader实现半兰伯特漫反射效果，并且使用SH Lights让效果更惊艳 ...
Socket学习总结系列(二) -- CocoaAsyncSocket
这是系列的第二篇 这是这个系列文章的第二篇，要是没有看第一篇的还是建议看看第一篇，以为这个是接着第一篇梳理的 先大概的总结一下在上篇的文章中说的些内容： 1、 整理了一下做IM我们有那些途径，以及我们怎样选择最适合自己的 2、在做IM的时候协议你又该怎样选择，以及这些协议之间一些的对比等等 3、接下 ...
JDK、Eclipse、Myeclipse、Tomcat等各种软件的版本详解（写给对版本和兼容性问题焦头烂额的你）
这篇文章我们来探讨一下关于JDK、Eclipse、Myeclipse、Tomcat的版本问题。一、关于版本的几个概念1.32位和64位两个版本： 简言之，64位的操作系统支持识别4G以上的内存条，而32位不行。所以今天我们安装的绝大多数操作系统和各种软件都是64位的（因为我们的电脑一般都大于等于4G ...
小球自由落体动态模拟（Position Based Simulation）
在过去的几十年中，基于物理的三维物体动态模拟成为了计算机图形学的研究热点，其中最常见的方法是基于力（force-based）的模拟方法，比如弹簧质点模型http://www.cnblogs.com/shushen/p/5473264.html，它把物体抽象成一系列质点以及连接这些质点的弹簧，然后通过 ...
Core 2.0 的dll实时更新、https、依赖包变更问题及解决
今天所有开发环境已经迁移到mac OS下的Visual Studio Code + 命令行编译发布，而运行服务器是CentOS7，和windows没什么关联了。 只要你Relese编译并在本地有一个与服务器相同的运行环境中运行成功了，迁移到真实服务器不会有什么难度。 下面是迁移到 2.0 版本之后遇 ...
从SAP顾问猝死事件谈顾问加班
今天朋友圈盛传一则消息，说是南瑞集团的一名名为牛耕耘的SAP顾问因为工作强度大，连续不分昼夜加班而猝死在工作岗位上，遗留下年迈的父母、体弱的妻子、刚满周岁的孩子和巨额的债务。诚然，但SAP圈子里加班确实是一个常态，似乎做项目不加班反而不太正常，尤其是到项目后期，加班到深夜甚至通宵都是常有的事儿。 看 ...
