上一页 1 ··· 58 59 60 61 62 63 64 65 66 ··· 216 下一页

2014年7月28日

heritrix 3.2.0 -- 环境搭建

摘要: heritrix作为一个比较经典的开源爬虫,写这篇文章目的是因为,3.X之后的heritrix的介绍以及配置的文章比较少了。 heritrix 3.x 以后使用maven 2配置jar包引用,但是总是有好多包没法从maven库下载。所以,这里讲的环境搭建直接使用了编译好的工程来做,heritr... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(123) 评论(0) 推荐(0)

记一次 java程序优化

摘要: 优化原因 环境中部署两个程序: web应用 tomcat 10G(webservice服务端,前端web服务)java应用 5G(webservice客户端,socket客户端) 之前的设计思路是打算web应用作为前端不做业务处理,后端使用webservice... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(110) 评论(0) 推荐(0)

heritrix 3.2.0 下载

摘要: 由于archive.org屏蔽,编译完成版本 http://builds.archive.org/maven2/org/archive/heritrix/heritrix/3.2.0/ 无法下载。 现将dist版本放到github,方便大家下载学习 github地址如下: https:... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(117) 评论(0) 推荐(0)

elasticsearch 性能测试

摘要: 最近花很大的经历来做性能测试,把结果整理到了ppt中,可能有个别地方不准,但是可以看看一个趋势。 主要分为两部分,一部分是写入elasticsearch性能,一部分是查询测试,elasticsearch的查询性能。 当然在elasticsearch1.3.0之后elasticsearch会提供... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(1820) 评论(0) 推荐(0)

spring 4 泛型注入

摘要: 最近对系统进行改造,发现在泛型实例初始化的时候,得不到想要的泛型。或者需要强制转换。 spring 4 开始支持泛型对象初始化,初始化方法如下: 注:使用配置文件的方法暂时还没有发现,下面是使用java annotation的方法: package com.mitchz..toolkit.cha... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(150) 评论(0) 推荐(0)

haproxy简单负载均衡搭建

摘要: 最近对负载均衡进行搭建具体方法如下:haproxy 修改部分(haproxy-cfg.cfg)global daemon maxconn 4500 defaults mode http timeout connect 5000ms time... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(221) 评论(0) 推荐(0)

系统监控的工具tsar

摘要: 近期一直在折腾着elasticsearch,需要对硬件进行评估 大概几方面 内存 cpu 硬盘 网络。 iostat vmstat top 几个命令用了一堆,其实需要关注的几个点只要都列出来就可以了 [root@cloud-15 tsar-master]# tsar -l -i 1Time... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(119) 评论(0) 推荐(0)

hadoop 1.2.1 安装步骤 伪分布式

摘要: 最近在系统的学习hadoop 课程第一步是安装hadoop1.x,具体安装步骤如下: 一、系统安装 本文使用centos6.5安装,具体安装步骤省略 二、jdk安装 下载jdk1.7.0_51解压,在环境中 设置环境变量: vi /etc/profile,添加如下行: export JAVA_... 阅读全文

posted @ 2014-07-28 10:50 三少爷的剑123 阅读(188) 评论(0) 推荐(0)

初识lucene

摘要: lucene的介绍网上有好多,再写一遍可能有点多余了。 使用lucene之前,有一系列的疑问 为什么lucene就比数据库快?倒排索引是什么,他是怎么做到的lucene的数据结构是什么样的,cpu消耗,内存消耗主要因为什么lucene的索引流程以及查询流程是什么样的 推荐两篇文章,更进一步了... 阅读全文

posted @ 2014-07-28 10:49 三少爷的剑123 阅读(107) 评论(0) 推荐(0)

hadoop 2.3 集群总结

摘要: 用了近两个礼拜的摸索终于搭建好了hadoop集群,测试性能也符合预期。 centos6.4下hadoop2.3集群总结如下: 关于环境的设置: 1.关闭selinux (反复折腾了好多次) vi /etc/selinux/config ... 阅读全文

posted @ 2014-07-28 10:49 三少爷的剑123 阅读(132) 评论(0) 推荐(0)

上一页 1 ··· 58 59 60 61 62 63 64 65 66 ··· 216 下一页

导航