风与叶子 - 博客园

2014年7月

摘要：原文地址：http://hmrose.blog.51cto.com/2249176/1073079引言近段时间以来，通过接触有关海量数据处理和搜索引擎的诸多技术，常常见识到不少精妙绝伦的架构图。除了每每感叹于每幅图表面上的绘制的精细之外，更为架构图背后所隐藏的设计思想所叹服。个人这两天一直在搜集各... 阅读全文

posted @ 2014-07-07 10:39 风与叶子阅读(242) 评论(0) 推荐(0)

jquery循环绑定事件

摘要：阅读全文

posted @ 2014-07-06 21:12 风与叶子阅读(1746) 评论(0) 推荐(0)

会php不回缓存行吗？多重实现

摘要：１、普遍缓存技术：数据缓存：这里所说的数据缓存是指数据库查询PHP缓存机制，每次访问页面的时候,都会先检测相应的缓存数据是否存在，如果不存在，就连接数据库，得到数据，并把查询结果序列化后保存到文件中，以后同样的查询结果就直接从缓存表或文件中获得。用的最广的例子看Discuz的搜索功能，把结果... 阅读全文

posted @ 2014-07-06 16:56 风与叶子阅读(485) 评论(0) 推荐(0)

Nutch相关框架视频教程--说明

摘要： PDF文档：Nutch大数据相关框架讲义.pdfNutch1.7二次开发培训讲义.pdfNutch1.7二次开发培训讲义之腾讯微博抓取分析Nutch公开课从搜索引擎到网络爬虫=============================================================Nu... 阅读全文

posted @ 2014-07-06 14:34 风与叶子阅读(764) 评论(0) 推荐(0)

Nginx 配置文件模板

摘要： user www www;worker_processes 2;error_log /usr/local/nginx/logs/nginx_error.log crit;pid /usr/local/nginx/logs/nginx.pid;#Specifies the valu... 阅读全文

posted @ 2014-07-05 14:46 风与叶子阅读(4757) 评论(0) 推荐(0)

2014年6月

原创：CentOS6.4配置solr 4.7.2+IK分词器

摘要：本文原创，转载请注明出处相关资源下载：http://pan.baidu.com/s/1pJPpiqv1.首先说明一下 solr是java语言开发的企业级应用服务器，所以你首先安装好jdk,配置好java的运行环境，然后solr提供一套wapapp,类似于一个后台对外提供服务，所以你也应该安装好 ... 阅读全文

posted @ 2014-06-29 10:09 风与叶子阅读(1423) 评论(0) 推荐(0)

nutch2.2.1安装部署

摘要： http://blog.csdn.net/chinesesword/article/details/19166765http://blog.sina.com.cn/s/blog_3c9872d00101p4f0.html 阅读全文

posted @ 2014-06-28 11:51 风与叶子阅读(216) 评论(0) 推荐(0)

linux 相关系列安装

摘要：以Red Hat Enterprise Linux 5为例进行讲解。相关系列：linux下jdk的安装linux下ant的安装linux下redis的安装linux下svn的安装linux下nginx的安装linux下graphviz的安装linux下doxygen的安装阅读全文

posted @ 2014-06-28 00:47 风与叶子阅读(157) 评论(0) 推荐(0)

社会化海量数据采集爬虫框架搭建

摘要：随着BIG DATA大数据概念逐渐升温，如何搭建一个能够采集海量数据的架构体系摆在大家眼前。如何能够做到所见即所得的无阻拦式采集、如何快速把不规则页面结构化并存储、如何满足越来越多的数据采集还要在有限时间内采集。这篇文章结合我们自身项目经验谈一下。我们来看一下作为人是怎么获取网页数据的呢？1、打开浏... 阅读全文

posted @ 2014-06-27 14:30 风与叶子阅读(195) 评论(0) 推荐(0)

开源爬虫软件汇总

摘要：世界上已经成型的爬虫软件多达上百种，本文对较为知名及常见的开源爬虫软件进行梳理，按开发语言进行汇总，如下表所示。虽然搜索引擎也有爬虫，但本次我汇总的只是爬虫软件，而非大型、复杂的搜索引擎，因为很多兄弟只是想爬取数据，而非运营一个搜索引擎。开源爬虫汇总表开发语言软件名称软件介绍许可证JavaArach... 阅读全文

posted @ 2014-06-27 14:26 风与叶子阅读(621) 评论(0) 推荐(0)

MySQL字段之集合(set)枚举(enum)

摘要： MySQL字段之集合(set)枚举(enum) (2008-12-23 13:51:23) 标签：it分类：MySQL集合 SETmysql> create table jihe(f1 set('f','m'));Query OK, 0 rows affected (0.11 sec)mysql> ... 阅读全文

posted @ 2014-06-23 15:31 风与叶子阅读(1118) 评论(0) 推荐(0)

php 分页类

摘要： page_num = ceil( $total / $this->length ); return $this->page_num; } function Calculation_Min_Max( $act_page = 1 ) { // 定义左右偏移量... 阅读全文

posted @ 2014-06-23 11:27 风与叶子阅读(167) 评论(0) 推荐(0)

Mysql全文搜索match against的用法

摘要：全文检索在 MySQL 中就是一个 FULLTEXT 类型索引。FULLTEXT 索引用于 MyISAM 表，可以在 CREATE TABLE 时或之后使用 ALTER TABLE 或 CREATE INDEX 在 CHAR、 VARCHAR 或 TEXT 列上创建对于大的数据库，将数据装载到一个没... 阅读全文

posted @ 2014-06-17 10:29 风与叶子阅读(1449) 评论(0) 推荐(0)

vsftpd配置教程

摘要：原文：http://www.cnblogs.com/hhuai/archive/2011/02/12/1952647.html可能会遇到的问题：http://www.cnblogs.com/weaver1/archive/2012/03/05/2380559.html 【500 OOPS: cann... 阅读全文

posted @ 2014-06-12 14:50 风与叶子阅读(346) 评论(0) 推荐(0)

Win8/8.1下驱动安装“数据无效”错误的有效解决方法

摘要： Windows8.1 安装完vmware 后并没有安装 vmnet1,vmnet8 这两个虚拟网卡，纠结了半天，原来是两个服务没打开。如果你使用的是Windows8或者8.1，并且精简过系统，那么在安装驱动程序的过程中，你可能会遇到“数据无效”的错误。笔者确信所拥有的驱动程序是可以安装在Win8/W... 阅读全文

posted @ 2014-06-06 11:41 风与叶子阅读(769) 评论(0) 推荐(0)

linux svn安装和配置

摘要：今天有个同事在搞SVN服务器，SVN服务器我也算比较熟的了，他在配置的时候遇到了一个问题，就是包函authz这个配置文件老是有问题，以前我装SVN的时候，是和apache结合的http://blog.51yip.com/server/291.html，我那同事装的呢，是单独的没有和apache结合，... 阅读全文

posted @ 2014-06-05 18:29 风与叶子阅读(559) 评论(0) 推荐(0)

php中__autoload()方法详解

摘要：原文地址：http://www.php100.com/html/php/lei/2013/0905/5267.html[导读] PHP在魔术函数__autoload()方法出现以前，如果你要在一个程序文件中实例化100个对象，那么你必须用include或者require包含进来100个类文件，或者你... 阅读全文

posted @ 2014-06-05 11:01 风与叶子阅读(6277) 评论(0) 推荐(0)

PHP中spl_autoload_register函数的用法

摘要： spl_autoload_register(PHP 5 >= 5.1.2)spl_autoload_register — 注册__autoload()函数说明bool spl_autoload_register ([ callback $autoload_function ] )将函数注册到SPL ... 阅读全文

posted @ 2014-06-05 11:00 风与叶子阅读(219) 评论(0) 推荐(0)

2014年5月

PHP5 session 详解【经典】

摘要：原文：http://www.pkwind.com/php5-session-xiang-jie-jing-dianhttp协议是WEB服务器与客户端 (浏览器)相互通信的协议，它是一种无状态协议。所谓无状态，指的是不会维护http请求数据，http请求是独立的，不持久的。而越来越复杂的WEB应用，... 阅读全文

posted @ 2014-05-30 18:30 风与叶子阅读(586) 评论(0) 推荐(1)

Host ‘host_name’ is blocked

摘要：参考：http://web2.0coder.com/archives/163之前服务器遇到了这个错误：Host ‘host_name‘ is blocked because of many connection errors.Unblockwith ‘mysqladmin flush-hosts’产... 阅读全文

posted @ 2014-05-29 13:26 风与叶子阅读(368) 评论(0) 推荐(0)

公告