2016 年 1月随笔档案 - xxxxxxxx1x2xxxxxxx

摘要：火车头采集器破解版阅读全文

posted @ 2016-01-31 23:44 xxxxxxxx1x2xxxxxxx 阅读(448) 评论(0) 推荐(0)

记Angular与Django REST框架的一次合作（2）：前端组件化——Angular

摘要：记Angular与Django REST框架的一次合作（2）：前端组件化——Angular 注：这是这个系列的第二部分，主要集中在Angular的使用方面。之前使用过AngularJS（Angular 1.x），混在Django的模板中使用，这些页面一般完全是结果展示页。在有Django表单输入的页阅读全文

posted @ 2016-01-31 23:11 xxxxxxxx1x2xxxxxxx 阅读(233) 评论(0) 推荐(0)

拉勾网一些“震惊”的结论

摘要：我把拉勾网爬了，然后得出了一些“震惊”的结论1 1. 在拉勾网上发布职位的城市分布情况，列出前十。所以，谈到互联网发达的地方，应该是 "北上深广"。如果这个数据还不能让你满意可以看下一组数据 2.不同城市在拉勾网上发布的职位数量前九个基本符合。通过不同城市的公司数量，和不同城市下发布职位数量基阅读全文

posted @ 2016-01-31 22:37 xxxxxxxx1x2xxxxxxx 阅读(238) 评论(0) 推荐(0)

一个知乎重度用户眼中的知乎

摘要：http://xlzd.me/2015/09/12/zhihu 玩知乎很久了，在知乎上学到不少知识，也学到不少抖机灵的技巧，知乎带给我最大的回忆，xwx。作为一个知乎重度用户兼技术宅，简单抓取了一下知乎的一点数据，力求看到一个尽可能真实的知乎社区。数据抓取知乎没有可以一页一页翻取用户资料的列表页阅读全文

posted @ 2016-01-30 18:23 xxxxxxxx1x2xxxxxxx 阅读(724) 评论(0) 推荐(0)

anthelion编译

摘要：编程工程 $ cd ./anthelion/anthelion/target/classes$ java -Xmx15G -cp ../Anthelion-1.0.0-jar-with-dependencies.jar com.yahoo.research.robme.anthelion.simul 阅读全文

posted @ 2016-01-30 15:40 xxxxxxxx1x2xxxxxxx 阅读(187) 评论(0) 推荐(0)

搜索引擎爬虫蜘蛛的USERAGENT大全

摘要：搜索引擎爬虫蜘蛛的USERAGENT大全搜索引擎爬虫蜘蛛的USERAGENT收集，方便制作采集的朋友。百度爬虫 * Baiduspider+(+http://www.baidu.com/search/spider.htm”) google爬虫 * Mozilla/5.0 (compatible; 阅读全文

posted @ 2016-01-29 19:04 xxxxxxxx1x2xxxxxxx 阅读(251) 评论(0) 推荐(0)

Netty系列之Netty高性能之道

摘要：jetty是web容器，和tomcat是同样的概念，但是具体实现不同。 netty是socket框架，和MINA是同样的概念，但是具体实现不同。 Netty系列之Netty高性能之道 1. 背景 1.1. 惊人的性能数据最近一个圈内朋友通过私信告诉我，通过使用Netty4 + Thrift压缩二进阅读全文

posted @ 2016-01-29 18:06 xxxxxxxx1x2xxxxxxx 阅读(165) 评论(0) 推荐(0)

python正则表达式

摘要：正则表达式前面十项，仅仅是想尽各种办法，突破各种常见限制，从而可以顺利访问网站，接下来的问题就是如何从一大堆html代码中提取我们需要的内容，主要介绍十分强大的正则表达式。了解正则表达式正则表达式是用来匹配字符串非常强大的工具，在其他编程语言中同样有正则表达式的概念，Python同样不例外，利阅读全文

posted @ 2016-01-29 16:53 xxxxxxxx1x2xxxxxxx 阅读(292) 评论(0) 推荐(0)

Cookie的使用,详解,获取,无法互通、客户端获取Cookie、深入解析cookie

摘要：Cookie是指某些网站为了辨别用户身份、进行session跟踪而存储在用户本地终端上的数据（通常经过加密）,比如说有些网站需要登录才能访问某个页面，在登录之前，你想抓取某个页面内容是不允许的。那么我们可以利用urllib2库保存我们登录的Cookie，然后再抓取其他页面就达到了目的了。 Opene 阅读全文

posted @ 2016-01-29 16:52 xxxxxxxx1x2xxxxxxx 阅读(2350) 评论(0) 推荐(0)

urllib2的异常处理

摘要：异常处理作为爬虫的抓取过程基本就那么多内容了，后面再将一些正则表达式的东西简单介绍一下基本就完事了，下面先说说异常处理的方法。先介绍一下抓取过程中的主要异常，如URLError和HTTPError。 URLError可能产生的原因主要有：网络无连接，即本机无法上网；连接不到特定的服务器；服务器不存阅读全文

posted @ 2016-01-29 16:51 xxxxxxxx1x2xxxxxxx 阅读(290) 评论(0) 推荐(0)

随机IP代理

摘要：第一个例子就设置了一个代理IP，也是不靠谱的，最好的方式就是多设置几个，如第二个例子，通过http://www.youdaili.net/Daili/你可以找到很多代理IP，抓取国内网站时尽量选取中国的IP（虽然这种免费IP代理很多，不过免费的东西靠不靠谱就说不好了，实际上以我的经验，我会初始设置阅读全文

posted @ 2016-01-29 16:47 xxxxxxxx1x2xxxxxxx 阅读(250) 评论(0) 推荐(0)

CentOS下yum使用代理的设置

摘要：export后好像没用？问题描述: CentOS yum时出现“Could not retrieve mirrorlist http://mirrorlist.centos.org/?release=5&arch=i386&repo=addons error ”错误： [plain] view p 阅读全文

posted @ 2016-01-28 20:43 xxxxxxxx1x2xxxxxxx 阅读(272) 评论(0) 推荐(0)

爬虫总结_python

摘要：import sqlite3 Python 的一个非常大的优点是很容易写很容易跑起来，缺点就是很多不那么著名的（甚至一些著名的）程序和库都不像 C 和 C++ 那边那样专业、可靠（当然这也有动态类型 vs 静态类型的原因）。首先，爬虫属于IO密集型程序（网络IO和磁盘IO），这类程序的瓶颈大多在网阅读全文

posted @ 2016-01-28 19:40 xxxxxxxx1x2xxxxxxx 阅读(268) 评论(0) 推荐(0)

python爬虫抓站的一些技巧总结

摘要：使用python爬虫抓站的一些技巧总结：进阶篇一、gzip/deflate支持现在的网页普遍支持gzip压缩，这往往可以解决大量传输时间，以VeryCD的主页为例，未压缩版本247K，压缩了以后45K，为原来的1/5。这就意味着抓取速度会快5倍。然而python的urllib/urllib2默认都阅读全文

posted @ 2016-01-28 19:38 xxxxxxxx1x2xxxxxxx 阅读(212) 评论(0) 推荐(0)

通过设置Referer反"反盗链"

摘要：package cn.searchphoto.util; import java.io.File; import java.io.FileOutputStream; import java.io.InputStream; import java.io.OutputStream; import jav 阅读全文

posted @ 2016-01-28 19:27 xxxxxxxx1x2xxxxxxx 阅读(321) 评论(0) 推荐(0)

Referer反反盗链

摘要：0x00 前言最近用Python非常多，确实感受到了Python的强大与便利。但同时我并没有相见恨晚的感觉，相反我很庆幸自己没有太早接触到Python，而是基本按着C→C++→Java→Python这条路学习下来的，因为过早使用太便利的方法有可能使你对底层细节一无所知。现在我对HTTP协议的了解阅读全文

posted @ 2016-01-28 19:18 xxxxxxxx1x2xxxxxxx 阅读(288) 评论(0) 推荐(0)

反盗链

摘要：盗链是指服务提供商自己不提供服务的内容，通过技术手段绕过其它有利益的最终用户界面(如广告)，直接在自己的网站上向最终用户提供其它服务提供商的服务内容，骗取最终用户的浏览和点击率。受益者不提供资源或提供很少的资源，而真正的服务提供商却得不到任何的收益。网站盗链会大量消耗被盗链网站的带宽，而真正的点阅读全文

posted @ 2016-01-28 19:04 xxxxxxxx1x2xxxxxxx 阅读(149) 评论(0) 推荐(0)

swt，jface，rcp

摘要：//swt-jface-rcp,基本结构：display类，shell类，组件：widget窗口控件，control控件，composites面板，button,label,text文本框，list列表框，combo组合框，面板窗口类：composite面板类，group分组框，ctabFolder 阅读全文

posted @ 2016-01-28 15:32 xxxxxxxx1x2xxxxxxx 阅读(244) 评论(0) 推荐(0)

C++历史

摘要：C++历史早期C++ •1979: 首次实现引入类的C（C with Classes first implemented） 1.新特性：类、成员函数、继承类、独立编译、公共和私有访问控制、友元、函数参数类型检查、默认参数、内联函数、赋值符号重载、构造函数、析构函数、f()相当于f(void)、调用阅读全文

posted @ 2016-01-27 16:07 xxxxxxxx1x2xxxxxxx 阅读(156) 评论(0) 推荐(0)

delete

摘要：delete 阅读全文

posted @ 2016-01-27 15:23 xxxxxxxx1x2xxxxxxx 阅读(152) 评论(0) 推荐(0)

（一）----使用HttpClient发送HTTP请求（通过get方法获取数据）

摘要：（一）----使用HttpClient发送HTTP请求（通过get方法获取数据）一、HTTP协议初探： HTTP（Hypertext Transfer Protocol）中文 “超文本传输协议”，是一种为分布式，合作式，多媒体信息系统服务，面向应用层的协议，是Internet上目前使用最广泛的应用阅读全文

posted @ 2016-01-27 15:23 xxxxxxxx1x2xxxxxxx 阅读(757) 评论(0) 推荐(0)

（三）----使用HttpClient发送HTTP请求（分别通过GET和POST方法发送数据）

摘要：文章来源：http://www.cnblogs.com/smyhvae/p/4006009.html 一、GET和POST的对比：在漫长的时间当中，其他的方法逐渐的退出了历史舞台，最常用的只剩下GET和POST方法。而之前已经讲过了通过GET方法获取数据，今天来学习一下如何分别通过GET和POST 阅读全文

posted @ 2016-01-27 15:22 xxxxxxxx1x2xxxxxxx 阅读(550) 评论(0) 推荐(0)

(四)SAX方式解析XML数据

摘要：SAX方式解析XML数据文章来源：http://www.cnblogs.com/smyhvae/p/4044170.html 一、XML和Json数据的引入：通常情况下，每个需要访问网络的应用程序都会有一个自己的服务器，我们可以向服务器提交数据，也可以从服务器获取数据。不过这个时候就有一个问题阅读全文

posted @ 2016-01-27 15:21 xxxxxxxx1x2xxxxxxx 阅读(251) 评论(0) 推荐(0)

If-Modified-Since页面是否更新

摘要：1 第一次先请求某个网页，抓取到本地，假设文件名为 a.html。这时文件系统有个文件的修改时间。 2 第二次访问网页，如果发现本地已经有了 a.html，则向服务器发送一个 If-Modified-Since 的请求（http://www.w3.org/Protocols/rfc2616/rfc2 阅读全文

posted @ 2016-01-27 15:07 xxxxxxxx1x2xxxxxxx 阅读(317) 评论(0) 推荐(0)

基于分块统计和机器学习的主题类网页内容识别算法实现和应用范例

摘要：周末两天在家闲着没事，于是整理了一下之前的的文档和一些琐碎的测试代码，居然发现了几个月前写的一个新闻类主题型网页正文文本自动抽取模块。当时写的比较简单和粗糙，虽然抽取结果差强人意，但是也还勉强说得过去。于是清理一下代码上的灰尘，做了一个小Demo，分享一下。作者写这篇文章的主要目的在于抛砖引玉，阅读全文

posted @ 2016-01-27 14:58 xxxxxxxx1x2xxxxxxx 阅读(396) 评论(0) 推荐(0)

文本去重第一步：基于内容的文本相似性计算

摘要：http://yshjava.iteye.com/blog/1560661 为何要计算文档相似性在今年年初的时候，我开始尝试做文本的自动聚类，当时是从网上，找到的一个K-Means算法，稍作了修改。从测试结果来看，分类效果不太好，究其原因，我认为有两个，一个是词库的问题，停用词词库太小，没有噪音阅读全文

posted @ 2016-01-27 14:49 xxxxxxxx1x2xxxxxxx 阅读(453) 评论(0) 推荐(0)

java中int,float,long,double取值范围，内存泄露

摘要：java中int,float,long,double取值范围是多少？写道public class TestOutOfBound { public static void main(String[] args) { System.out.println(Integer.MAX_VALUE-(-In... 阅读全文

posted @ 2016-01-26 19:56 xxxxxxxx1x2xxxxxxx 阅读(403) 评论(0) 推荐(0)

Linux多线程服务端编程:使用muduo C++网络库

摘要：内容推荐本书主要讲述采用现代C++在x86-64 Linux上编写多线程TCP网络服务程序的主流常规技术，重点讲解一种适应性较强的多线程服务器的编程模型，即one loop per thread。这是在Linux下以native语言编写用户态高性能网络程序最成熟的模式，掌握之后可顺利地开发各类常见的... 阅读全文

posted @ 2016-01-26 19:02 xxxxxxxx1x2xxxxxxx 阅读(348) 评论(0) 推荐(0)

HttpClient使用详解

摘要：http://itindex.net/detail/52566-httpclientHttpClient使用详解标签： httpclient | 发表时间：2015-01-22 12:07 | 作者：fang323619分享到：出处：http://blog.csdn.netHttpClient:... 阅读全文

posted @ 2016-01-26 10:08 xxxxxxxx1x2xxxxxxx 阅读(289) 评论(0) 推荐(0)

Java模拟POST表单提交HttpClient操作

摘要：publicstaticvoidLogin(){Stringurl="http://www.***.com/login";PostMethodpostMethod=newPostMethod(url);//填入各个表单域的值NameValuePair[]data={newNameValuePair(... 阅读全文

posted @ 2016-01-26 10:07 xxxxxxxx1x2xxxxxxx 阅读(331) 评论(0) 推荐(0)

http调试工具Charles Proxy用法详解

摘要：https://www.charlesproxy.com/download/ Charles Proxy 通常称为Charles，Charles是目前最强大的http调试工具，在界面和功能上远强于Fiddler，同时是全平台支持，堪称圣杯级工具，不过在这里为您提供了Charles和谐版，欢迎下载使用阅读全文

posted @ 2016-01-25 21:06 xxxxxxxx1x2xxxxxxx 阅读(591) 评论(0) 推荐(0)

Eclipse项目名出现红叉

摘要：Eclipse项目名出现红叉在Eclipse的windows->show views->problem右健project->maven->update project. 阅读全文

posted @ 2016-01-25 20:39 xxxxxxxx1x2xxxxxxx 阅读(145) 评论(0) 推荐(0)

firebug使用

摘要：查看网页的header是优化web应用的关键一环，从header中，可以检查到非常多的信息：网页在squid中的缓存时间（age）、客户端缓存时间（expires）、是否有最后修改时间（last-modified）、是否在 squid中命中（x-cache）、服务器版本、服务器时间(Date)、g... 阅读全文

posted @ 2016-01-25 17:27 xxxxxxxx1x2xxxxxxx 阅读(151) 评论(0) 推荐(0)

3xx Redirection

摘要：3xx RedirectionThis class of status code indicates the client must take additional action to complete the request. Many of these status codes are used... 阅读全文

posted @ 2016-01-25 16:28 xxxxxxxx1x2xxxxxxx 阅读(322) 评论(0) 推荐(0)

Note:This element neither has attached source nor attached Javadoc

摘要：在用Eclipse编写程序时，发现把鼠标放到类名上时出现标题的提示解决方法：右击项目，选择 properties –> Java Build Path –> Libraries，如图以jxl.jar为例，单击jax.jar左边的三角符号，出现从上面看Javadoc location:(Non 阅读全文

posted @ 2016-01-25 15:56 xxxxxxxx1x2xxxxxxx 阅读(294) 评论(0) 推荐(0)

chrome查看headers

摘要：F12-> network标签, 刷新网页-> 找到该网页url,选择headers 阅读全文

posted @ 2016-01-25 14:46 xxxxxxxx1x2xxxxxxx 阅读(247) 评论(0) 推荐(0)

高度关注！国务院对A股发出强烈信号↓

摘要：高度关注！国务院对A股发出强烈信号↓http://dwz.cn/2qHBd1郎咸平：中国股市存在一大隐疾使其成为全球市场的一个另类！http://dwz.cn/2qHBVy一不小心，马云又完成了四场颠覆！http://dwz.cn/2qHClb量化投资Matlab应用实战班，资深专家深入讲解Mat... 阅读全文

posted @ 2016-01-25 05:17 xxxxxxxx1x2xxxxxxx 阅读(149) 评论(0) 推荐(0)

java图形

摘要：JFreeCharteclipse图形化编程插件jigloojfaceibm的jface基于swt,swing解决了awt存在的lcd问题。swing组件：container,window,frame,jframe,jcomponent,jpanel,jText,jLabel,JpasswordFi... 阅读全文

posted @ 2016-01-25 05:16 xxxxxxxx1x2xxxxxxx 阅读(144) 评论(0) 推荐(0)

人脸识别资源

摘要：Smart Beauty---智能人脸美容软件deep learning相关的内容deep learning是一个不错的学习内容，可以小小的归纳为一类。这几个中文博客里有deep learning的很多心得：http://www.cnblogs.com/tornadomeet/tag/DeepLea... 阅读全文

posted @ 2016-01-25 05:16 xxxxxxxx1x2xxxxxxx 阅读(220) 评论(0) 推荐(0)

人脸数据库

摘要：人脸数据库Annotated Database (Hand, Meat, LV Cardiac, IMM face) (http://www2.imm.dtu.dk/~aam/)AR Face Database (http://cobweb.ecn.purdue.edu/~aleix/aleix_f... 阅读全文

posted @ 2016-01-24 15:18 xxxxxxxx1x2xxxxxxx 阅读(952) 评论(0) 推荐(0)

人脸识别的一些资源

摘要：人脸识别的一些资源http://www.face-rec.org/algorithms/http://www.cs.colostate.edu/evalfacerec/algorithms5.htmlhttp://www.frvt.org/FRGC/www.boosting.org(currentl... 阅读全文

posted @ 2016-01-24 15:17 xxxxxxxx1x2xxxxxxx 阅读(177) 评论(0) 推荐(0)

机器视觉会议以及牛人

摘要：机器视觉会议以及牛人机器学习顶级会议：NIPS, ICML, UAI, AISTATS;（期刊：JMLR, ML, Trends in ML, IEEE T-NN）计算机视觉和图像识别：ICCV, CVPR,ECCV;（期刊：IEEE T-PAMI,IJCV, IEEE T-IP）人工智能：IJCA... 阅读全文

posted @ 2016-01-24 15:16 xxxxxxxx1x2xxxxxxx 阅读(452) 评论(0) 推荐(0)

转图像偏微分方程不适定问题

摘要：图像处理作为一种预处理的手段，几乎成为所有图像处理方法的前奏。在许多情况下，图像滤波作为图像识别的一种预处理手段，它需要满足两个限制条件：对比度不变和仿射不便。而仿射不变性可以被分解为平移不变、旋转不变、欧式不变、伸缩不变等。满足对比度不变和仿射不变的偏微分方程只有一个，即 AMSS(Affin... 阅读全文

posted @ 2016-01-24 15:15 xxxxxxxx1x2xxxxxxx 阅读(340) 评论(0) 推荐(0)

浅析点对点(End-to-End)的场景文字识别(图片文字)

摘要：一、背景随着智能手机的广泛普及和移动互联网的迅速发展，通过手机等移动终端的摄像头获取、检索和分享资讯已经逐步成为一种生活方式。基于摄像头的 (Camera-based)的应用更加强调对拍摄场景的理解。通常，在文字和其他物体并存的场景，用户往往首先更关注场景中的文字信息，因而如何能够正确识别场景中的... 阅读全文

posted @ 2016-01-24 15:14 xxxxxxxx1x2xxxxxxx 阅读(353) 评论(0) 推荐(0)

图像处理数学方法

摘要：图像处理数学方法在图像处理的发展过程中，数学始终起着举足轻重的作用，并渗透在图像处理的所有分支之中。到上世纪六七十年代为止，以Fourier分析为代表的线性处理方法占据了几乎整个数字图像处理领域。在此期间，借助于随机过程理论，人们建立了图像模型通过概率论以及在此基础上建立的信息论建立了图像编码的框... 阅读全文

posted @ 2016-01-24 15:12 xxxxxxxx1x2xxxxxxx 阅读(260) 评论(0) 推荐(0)

计算机视觉代码合集

摘要：这些代码很实用，可以让我们站在巨人的肩膀上~~TopicResourcesReferencesFeature Extraction·SIFT [1] [Demo program][SIFT Library] [VLFeat]·PCA-SIFT [2] [Project]·Affine-SIFT [3... 阅读全文

posted @ 2016-01-24 15:08 xxxxxxxx1x2xxxxxxx 阅读(381) 评论(0) 推荐(0)

计算机视觉与模式识别代码合集第二版two

摘要：Topic Name Reference code Image Segmentation Segmentation by Minimum Code Length AY Yang, J. Wright, S. Shankar Sastry, Y. Ma , Unsupervised Segmentat 阅读全文

posted @ 2016-01-24 15:06 xxxxxxxx1x2xxxxxxx 阅读(366) 评论(0) 推荐(0)

计算机视觉与模式识别代码合集第二版one

摘要：Topic Name Reference code Feature Detection, Feature Extraction, and Action Recognition Space-Time Interest Points (STIP) I. Laptev, On Space-Time Int 阅读全文

posted @ 2016-01-24 15:06 xxxxxxxx1x2xxxxxxx 阅读(380) 评论(0) 推荐(0)

计算机视觉与模式识别代码合集第二版three

摘要：计算机视觉与模式识别代码合集第二版three Topic Name Reference code Optical Flow Horn and Schunck's Optical Flow code Optical Flow Black and Anandan's Optical Flow code 阅读全文

posted @ 2016-01-24 15:05 xxxxxxxx1x2xxxxxxx 阅读(355) 评论(0) 推荐(0)

牛人主页（主页有很多论文代码）

摘要：牛人主页（主页有很多论文代码）Serge Belongieat UC San DiegoAntonio Torralbaat MITAlexei Ffrosat CMUCe Liuat Microsoft Research New EnglandVittorio Ferrariat Univ.of ... 阅读全文

posted @ 2016-01-24 15:04 xxxxxxxx1x2xxxxxxx 阅读(564) 评论(0) 推荐(0)

计算机视觉、模式识别方面稍微容易中的期刊

摘要：计算机视觉、模式识别方面稍微容易中的期刊分类：杂谈 (1)pattern recognition letters, 从投稿到发表，一年半时间(2)Pattern recognition 不好中，时间长(3)IEICE Transactions on Information and Systems，... 阅读全文

posted @ 2016-01-24 15:04 xxxxxxxx1x2xxxxxxx 阅读(900) 评论(0) 推荐(0)

grep与正则表达式,grep、egrep和fgrep

摘要：grep -io "http:/=[A-Z0-9]\{16\}" ./wsxf.txt >wsxf_urls.txt grep用法详解:grep与正则表达式首先要记住的是: 正则表达式与通配符不一样,它们表示的含义并不相同!正则表达式只是一种表示法,只要工具支持这种表示法，那么该工具就可以处理正阅读全文

posted @ 2016-01-22 21:09 xxxxxxxx1x2xxxxxxx 阅读(2980) 评论(0) 推荐(0)

delete

摘要：delete 阅读全文

posted @ 2016-01-22 20:59 xxxxxxxx1x2xxxxxxx 阅读(166) 评论(0) 推荐(0)

touch修改文件的修改时间和访问时间,ls --full-time显示文件详细，stat命令

摘要：1. 同时修改文件的修改时间和访问时间touch -d "2010-05-31 08:10:30" test.doc2. 只修改文件的修改时间touch -m -d "2010-05-31 08:10:30" test.doc3. 只修改文件的访问时间touch -a -d "2010-05-31 ... 阅读全文

posted @ 2016-01-22 18:10 xxxxxxxx1x2xxxxxxx 阅读(421) 评论(0) 推荐(0)

rzsz不能大于4G，securefx传5.2G没有问题，

摘要：rzsz不能大于4G，securefx传5.2G没有问题，查看系统限制：$ulimit -acore file size (blocks, -c) 0data seg size (kbytes, -d) unlimitedscheduling priority (-e) 0file size (bl... 阅读全文

posted @ 2016-01-22 18:04 xxxxxxxx1x2xxxxxxx 阅读(213) 评论(0) 推荐(0)

Selenium来抓取动态加载的页面

摘要：一般的爬虫都是直接使用http协议，下载指定url的html内容，并对内容进行分析和抽取。在我写的爬虫框架webmagic里也使用了HttpClient来完成这样的任务。但是有些页面是通过js以及ajax动态加载的，例如：花瓣网。这时如果我们直接分析原始页面的html，是得不到有效的信息的。当然，因... 阅读全文

posted @ 2016-01-22 01:02 xxxxxxxx1x2xxxxxxx 阅读(356) 评论(0) 推荐(0)

webmagic加上了注解支持

摘要：今天有个网友在博客回帖，能不能用注解来写一个爬虫？想了想，因为Javaer总习惯结果有个对象Model(我在自己用的时候也是这样)，ResultItems的key-value形式难免会有点麻烦，何不将抽取和Model合为一体呢？好了！现在爬osc博客只有这点代码了！而且这个对象本身是可以继续使用的！... 阅读全文

posted @ 2016-01-22 01:01 xxxxxxxx1x2xxxxxxx 阅读(189) 评论(0) 推荐(0)

程序员必须注意的十大编程禁忌

摘要：一、不提升非技术技能我们认为非技术技能是项目成功的主要因素。这些非技术技能也可以称之为“软技能”，总体上来说，它已经被公司证明为能够驾驭企业和客户之间的长期商业关系，因此也能决定公司的成长发展路径。一些关键的软技能指标包括：a.纪律——这是最重要的特征之一，缺乏纪律，最终会让这个开发团队在开发能力上... 阅读全文

posted @ 2016-01-22 00:52 xxxxxxxx1x2xxxxxxx 阅读(936) 评论(0) 推荐(0)

成为优秀程序员需掌握的11个要点

摘要：1.永远不要重复代码不惜一切代价也要避免重复代码。如果你有几个不同的地方经常性地要使用某个代码片段，那么可以将它重构成函数。代码重复不但会导致阅读混乱，导致bug ——修复了这里的重复片段，却遗漏了其他地方的，还会导致代码库的臃肿和可执行文件大小的膨胀。现在的编程语言，能大大改善这方面的麻烦，例如，... 阅读全文

posted @ 2016-01-22 00:51 xxxxxxxx1x2xxxxxxx 阅读(224) 评论(0) 推荐(0)

开源搜索引擎评估:lucene sphinx elasticsearch

摘要：开源搜索引擎评估:lucene sphinx elasticsearch 开源搜索引擎程序有3大类 lucene系,java开发,包括solr和elasticsearch sphinx,c++开发,简单高性能 Xapian,c++开发搜索引擎程序这个名称不妥当,严格说来应该叫做索引程序(index 阅读全文

posted @ 2016-01-22 00:47 xxxxxxxx1x2xxxxxxx 阅读(256) 评论(0) 推荐(0)

如何开发auto complete 智能提示功能

摘要：目录(?)[+]如何开发auto complete 智能提示功能最近网上好像流传用redis实现，其实智能提示和用什么存储关系不大 07年，我过一个类似的项目我有几千个名字，随着用户在输入框中不断输入汉字或者拼音，用一个下拉列表提示它可能的输入项下拉框，选中状态，自然是用js做，这里主要讲一下后端代... 阅读全文

posted @ 2016-01-22 00:45 xxxxxxxx1x2xxxxxxx 阅读(302) 评论(0) 推荐(0)

搜索引擎分词与索引库

摘要：分词是很多做SEO的人常听到的概念，为了让大家在这个方面不会有疑惑，现在要来讲一下分词以及索引库。这也是更深入的了解搜索引擎的开始。搜索引擎每天都是在处理一个基本的需求：用户搜索一个关键词，搜索引擎马上找到相关的网页给用户。这个过程要怎么实现呢? 下面就分步来了解这个过程。首先搜索引擎要... 阅读全文

posted @ 2016-01-22 00:43 xxxxxxxx1x2xxxxxxx 阅读(349) 评论(0) 推荐(0)

robots.txt禁止搜索引擎收录

摘要：禁止搜索引擎收录的方法一．什么是robots.txt文件? 搜索引擎通过一种程序robot（又称spider），自动访问互联网上的网页并获取网页信息。您可以在您的网站中创建一个纯文本文件robots.txt，在这个文件中声明该网站中不想被robot访问的部分，这样，该网站的部分或全部内容... 阅读全文

posted @ 2016-01-22 00:40 xxxxxxxx1x2xxxxxxx 阅读(202) 评论(0) 推荐(0)

osc搜索引擎框架search-framework,TngouDB,gso,

摘要：项目目的：OSChina 实现全文搜索的简单封装框架License: Public Domain包含内容：重建索引工具 -> IndexRebuilder.java增量构建索引工具 -> IndexUpdater.java全文搜索框架http://git.oschina.net/oschina/se... 阅读全文

posted @ 2016-01-22 00:31 xxxxxxxx1x2xxxxxxx 阅读(295) 评论(0) 推荐(0)

当Scheduler拿不到url的时候，不能立即退出

摘要：在webmagic的多线程抓取中有一个比较麻烦的问题：当Scheduler拿不到url的时候，不能立即退出，需要等到没抓完的线程都运行完毕，没有新url产生时，才能退出。之前使用Thread.sleep来实现，当拿不到url 时，sleep一段时间再取，确定没有线程执行之后，再退出。但是这种方式始... 阅读全文

posted @ 2016-01-21 21:36 xxxxxxxx1x2xxxxxxx 阅读(219) 评论(0) 推荐(0)

摘要算法CRC8、CRC16、CRC32，MD2 、MD4、MD5，SHA1、SHA256、SHA384、SHA512，RIPEMD、PANAMA、TIGER、ADLER32

摘要：1、CRC8、CRC16、CRC32CRC（Cyclic Redundancy Check，循环冗余校验）算法出现时间较长，应用也十分广泛，尤其是通讯领域，现在应用最多的就是 CRC32 算法，它产生一个4字节（32位）的校验值，一般是以8位十六进制数，如FA 12 CD 45等。CRC算法的优点在... 阅读全文

posted @ 2016-01-21 11:05 xxxxxxxx1x2xxxxxxx 阅读(1114) 评论(0) 推荐(0)

sha256

摘要：SHA-512 (这些有时候也被称做 SHA-2)。简介　SHA 家族SHA (Secure Hash Algorithm，译作安全散列算法) 是美国国家安全局 (NSA) 设计，美国国家标准与技术研究院 (NIST) 发布的一系列密码散列函数。正式名称为 SHA 的家族第一个成员发布于 1993年... 阅读全文

posted @ 2016-01-21 10:57 xxxxxxxx1x2xxxxxxx 阅读(3157) 评论(0) 推荐(0)

非对称加密RSA、Elgamal、背包算法、Rabin、D-H、ECC（椭圆曲线加密算法）等。使用最广泛的是RSA算法

摘要：非对称加密算法需要两个密钥：公开密钥（publickey）和私有密钥（privatekey）。公开密钥与私有密钥是一对，如果用公开密钥对数据进行加密，只有用对应的私有密钥才能解密；如果用私有密钥对数据进行加密，那么只有用对应的公开密钥才能解密。因为加密和解密使用的是两个不同的密钥。非对称加密与对... 阅读全文

posted @ 2016-01-21 10:44 xxxxxxxx1x2xxxxxxx 阅读(1237) 评论(0) 推荐(0)

3个著名加密算法(MD5、RSA、DES)的解析

摘要：3个著名加密算法(MD5、RSA、DES)的解析 MD5的全称是Message-Digest Algorithm 5，在90年代初由MIT的计算机科学实验室和RSA Data Security Inc发明，经MD2、MD3和MD4发展而来。 MD5将任意长度的“字节串”变换成一个128bit的大整数... 阅读全文

posted @ 2016-01-21 10:23 xxxxxxxx1x2xxxxxxx 阅读(505) 评论(0) 推荐(0)

DOM - Element 对象

摘要：http://www.runoob.com/dom/dom-element.htmlElement 对象Element 对象代表 XML 文档中的一个元素。元素可以包含属性、其他元素或文本。如果一个元素包含文本，则在文本节点中表示该文本。重要事项：文本永远存储在文本节点中。在 DOM 处理过程中的一... 阅读全文

posted @ 2016-01-20 17:50 xxxxxxxx1x2xxxxxxx 阅读(156) 评论(0) 推荐(0)

XML实例文档

摘要：from: http://www.w3school.com.cn/xpath/xpath_examples.aspXML实例文档我们将在下面的例子中使用这个 XML 文档："books.xml" : Everyday Italian Giada De Laurentiis 2005 30.0... 阅读全文

posted @ 2016-01-20 17:49 xxxxxxxx1x2xxxxxxx 阅读(323) 评论(0) 推荐(0)

15个nosql

摘要：1、MongoDB 介绍 MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。主要解决的是海量数据的访问效率问题，为WEB应用提供可扩展的高性能数据存储解决方案。当数据量达到50GB以上的时候，MongoDB的数据库访问速度是MySQL的10倍以上。MongoDB的并发读写效率不是特阅读全文

posted @ 2016-01-19 17:39 xxxxxxxx1x2xxxxxxx 阅读(2126) 评论(0) 推荐(0)

高知名度企业不完全列表

摘要：高知名度企业不完全列表：互联网：腾讯，百度，360，乐视网，网易，新浪，搜狐，谷歌，EBAY，58同城，赶集网，安居客，凤凰网，FACEBOOK，Twitter，雅虎，优酷，爱奇艺，创新工场，滴滴，YY电商：阿里巴巴，京东，美团，大众点评，亚马逊，聚美优品，1号店，唯品会科技：联想，中兴，华为，微软... 阅读全文

posted @ 2016-01-16 01:45 xxxxxxxx1x2xxxxxxx 阅读(159) 评论(0) 推荐(0)

极路由1s，固件需要刷入RipOS系统的加40块

摘要：极路由1s，固件需要刷入RipOS系统的加40块，集成wifidog功能，wifi广告路由器的理想选择功能。经过测试，无线性能稳定，无线可带32个手机客户端。具体配置： 7620CPU ，主频580Mhz， 128M大内存，全金属外壳，带电源适配器，原包装。室内覆盖100米，室外覆盖300M，大功率... 阅读全文

posted @ 2016-01-16 01:42 xxxxxxxx1x2xxxxxxx 阅读(309) 评论(0) 推荐(0)

对称加密与非对称加密

摘要：对称加密与非对称加密（一）对称加密（Symmetric Cryptography）对称加密是最快速、最简单的一种加密方式，加密（encryption）与解密（decryption）用的是同样的密钥（secret key）。对称加密有很多种算法，由于它效率很高，所以被广泛使用在很多加密协议的核心当中。... 阅读全文

posted @ 2016-01-16 01:16 xxxxxxxx1x2xxxxxxx 阅读(449) 评论(0) 推荐(0)

对称加密算法DES，3重DES，TDEA，Blowfish，RC5，IDEA，AES。

摘要：对称加密算法：DES，3重DES，TDEA，Blowfish，RC5，IDEA，AES。1、对称加密算法1.1 定义对称加密算法是应用较早的加密算法，技术成熟。在对称加密算法中，数据发信方将明文（原始数据）和加密密钥（mi yue）一起经过特殊加密算法处理后，使其变成复杂的加密密文发送出去。收信方收... 阅读全文

posted @ 2016-01-16 00:51 xxxxxxxx1x2xxxxxxx 阅读(990) 评论(0) 推荐(0)

Linux查看硬盘使用时间等信息

摘要：查看硬盘信息的很多命令，都需要root权限，如果普通用户无法看到信息，请切换至root：1、查看硬盘使用时间等信息硬盘使用时间很重要，硬盘理论寿命是3万小时以上$ sudo smartctl -A /dev/sdasmartctl 5.43 2012-06-30 r3573 [x86_64-linu... 阅读全文

posted @ 2016-01-14 18:43 xxxxxxxx1x2xxxxxxx 阅读(1616) 评论(0) 推荐(0)

eclipse中我要同时看两个console

摘要：eclipse中我要同时看两个console有一个按钮“New Console View”，可以让你再建一个Console，还有一个按钮“Display Selected Console”，可以在两个Console之间切换。这样你就可以同时显示两个Console了。阅读全文

posted @ 2016-01-14 17:56 xxxxxxxx1x2xxxxxxx 阅读(492) 评论(0) 推荐(0)

H2O是开源基于大数据的机器学习库包

摘要：H2O是开源基于大数据的机器学习库包H2O能够让Hadoop做数学，H2O是基于大数据的统计分析机器学习和数学库包，让用户基于核心的数学积木搭建应用块代码，采取类似R语言 Excel或JSON等熟悉接口，使的BigData爱好者和专家可以利用一系列简单的先进算法对数据集进行探索，建模和评估。数据... 阅读全文

posted @ 2016-01-13 21:56 xxxxxxxx1x2xxxxxxx 阅读(417) 评论(0) 推荐(0)

eclipse怎么设置字体大小

摘要：eclipse怎么设置字体大小1打开eclipse,找到window2点击后在下拉菜单中找到preferences3在左边的菜单栏中找到general，appearance在general展开后的第一行，点击展开appearance4找到colors and fonts,点击这样就快找到我们要的了5... 阅读全文

posted @ 2016-01-13 21:52 xxxxxxxx1x2xxxxxxx 阅读(173) 评论(0) 推荐(0)

Eclipse 中的重构功能

摘要：Eclipse 中的重构功能Eclipse 中的重构功能使其成为了一个现代的 Java 集成开发环境 (IDE)，而不再是一个普通的文本编辑器。使用重构，您可以轻松更改您的代码，而不必担心对别处造成破坏。有了重构，您可以只关注于所编写代码的功能，而不必分心去考虑代码的外观如何，因为之后您可以使用重... 阅读全文

posted @ 2016-01-13 21:51 xxxxxxxx1x2xxxxxxx 阅读(218) 评论(0) 推荐(0)

透明代理、匿名代理、混淆代理、高匿代理有什么区别？

摘要：HTTP代理服务器的分类 HTTP代理服务器的分类一、HTTP代理按匿名功能分类。是否具有隐藏IP的功能。非匿名代理：不具有匿名功能。匿名代理。使用此种代理时，虽然被访问的网站不能知道你的ＩＰ地址，但仍然可以知道你在使用代理，有些侦测ip的网页也仍然可以查到你的ip。高度匿名代理：使用此种阅读全文

posted @ 2016-01-13 15:51 xxxxxxxx1x2xxxxxxx 阅读(2464) 评论(0) 推荐(0)

交大人在各行各业一直不懈追逐着自己的创业梦想，如携程网、

摘要：上海交大哪个学科领域创业成功者最多？毕业多少年后开始创业？创业校友认为创业中最需要的能力是哪项？近日，上海交大创业投资俱乐部发布一则《2014上海交大校友创业调查报告》，用数据揭示了近年来交大创业校友在年龄、所学专业、创业领域等多方面的特点和趋势。??? 这份调查报告调研了200多位创业校友，被调查... 阅读全文

posted @ 2016-01-13 12:30 xxxxxxxx1x2xxxxxxx 阅读(212) 评论(0) 推荐(0)

Struts 2.x仍然明显落后于时代。 Struts 2.x这一类老牌Web MVC开发框架仅能用于开发瘦客户端应用，无法用来开发对于交互体验要求更高的应用。

摘要：后来我在工作中陆续使用过Struts 1.x和Struts 2.x。我曾经把一个开源的基于Struts 1.x的自助式广告联盟应用移植到Spring MVC，还基于Struts 2.x做过网站开发。Struts 1.x的主要问题是框架的侵入性太大，不利于代码重用和单元测试。Struts 2.x确实进... 阅读全文

posted @ 2016-01-13 11:23 xxxxxxxx1x2xxxxxxx 阅读(197) 评论(0) 推荐(0)

Eclipse乱码怎么办

摘要：Eclipse里设置编码有三个层次：全局、工程、文件。文件的编码会覆盖工程的编码，工程的编码会覆盖全局的编码。我猜测：虽然你的工程编码更改为GBK，但只对新建文件有效。如果工程中旧有的文件是UTF-8编码，那么它的编码会覆盖工程编码，即不受你设置的工程编码影响。解决方法是：在文件上点右键，在文... 阅读全文

posted @ 2016-01-12 19:00 xxxxxxxx1x2xxxxxxx 阅读(487) 评论(0) 推荐(0)

GitHub 优秀Android 开源项目

摘要：阅读目录1.Xabber客户端2.oschina客户端3.手机安全管家4.星座连萌5.玲闹铃6.魔乐盒7.PWP日历8.Apollo音乐播放器9.夏普名片识别10.高仿人人网11.简洁天气12.高仿开心网13.百度推聊14.餐厅订餐15.eoe客户端16.饭否网客户端17.imiPhoneWall1... 阅读全文

posted @ 2016-01-09 17:18 xxxxxxxx1x2xxxxxxx 阅读(635) 评论(0) 推荐(0)

Android开发技术周报

摘要：Android开发技术周报原文 http://androidweekly.cn/android-dev-weekly-issue48/教程深入理解Android之GradleGradle是当前非常“劲爆”得构建工具。本篇文章就是专为讲解Gradle而来。介绍Gradle之前，先说点题外话。说实话，我... 阅读全文

posted @ 2016-01-09 17:17 xxxxxxxx1x2xxxxxxx 阅读(160) 评论(0) 推荐(0)

GitHub上最火的40个iOS开源项目

摘要：1. AFNetworking在众多iOS开源项目中，AFNetworking可以称得上是最受开发者欢迎的库项目。AFNetworking是一个轻量级的iOS、 Mac OS X网络通信类库，现在是GitHub上第三大Objective-C库。它建立在NSURLConnection、NSOperat... 阅读全文

posted @ 2016-01-09 15:14 xxxxxxxx1x2xxxxxxx 阅读(215) 评论(0) 推荐(0)

GitHub上最火的74个Android开源项目

摘要：GitHub上最火的74个Android开源项目1.ActionBarSherlockActionBarSherlock应该算得上是GitHub上最火的Android开源项目了，它是一个独立的库，通过一个API和主题，开发者就可以很方便地使用所有版本的Android动作栏的设计模式。对于Androi... 阅读全文

posted @ 2016-01-09 15:13 xxxxxxxx1x2xxxxxxx 阅读(287) 评论(0) 推荐(1)

2015年十大热门Android开源新项目

摘要：2015年十大热门Android开源新项目2015 即将结束，又到了大家喜闻乐见的年终盘点时刻啦，今天给大家盘点一下 2015 年 Android 开发领域新出现的 10 大热门开源项目。数据来自于 GitHub 搜索，创建时间自 2015 年 1 月 1 日开始的新项目才能入围，因此一些创建时间较... 阅读全文

posted @ 2016-01-09 15:11 xxxxxxxx1x2xxxxxxx 阅读(150) 评论(0) 推荐(0)

每个Android开发者都应该了解的资源列表

摘要：书籍官方开发者网站优质问答网站STACKOVERFLOW 开发者博客 Google+账号开源项目开源库 Google I/O主题讨论请停下来，你吓到我了 Android开发者中的超级明星结语参考资料阅读全文

posted @ 2016-01-09 15:10 xxxxxxxx1x2xxxxxxx 阅读(139) 评论(0) 推荐(0)

Android开发者必须深入学习的10个应用开源项目

摘要：Android 开发又将带来新一轮热潮，很多开发者都投入到这个浪潮中去了，创造了许许多多相当优秀的应用。其中也有许许多多的开发者提供了应用开源项目，贡献出他们的智慧和创造力。学习开源代码是掌握技术的一个最佳方式。下面推荐几个应用开源项目，这些项目不仅提供了优秀的创意，也可以直接掌握 Android... 阅读全文

posted @ 2016-01-09 15:09 xxxxxxxx1x2xxxxxxx 阅读(134) 评论(0) 推荐(0)

Android开发者必知的开发资源

摘要：Android开发者必知的开发资源随着 Android 平台市场份额的持续猛增，越来越多的开发者开始投入 Android 应用程序的开发大潮。如果您是一位 2013 年刚刚入行的 Android 开发新兵，恭喜你，因为这个平台已经在过去几年里变得愈发成熟了，绝对值得住你全情投入。目前来看，Andr... 阅读全文

posted @ 2016-01-09 15:08 xxxxxxxx1x2xxxxxxx 阅读(186) 评论(0) 推荐(0)

Android开发周报：反编译对抗研究、动手制作智能镜子

摘要：新闻《Android Wear落地中国谷歌增强安卓生态控制力》：9月8日，由摩托罗拉推出的智能手表Moto 360二代作为国内发售的第一款搭载官方Android Wear的设备，正式在上海发布。值得注意的是，摩托罗拉这款智能手表搭载的不是Google Play和谷歌地图，而是联想应用商店和搜狗地... 阅读全文

posted @ 2016-01-09 15:07 xxxxxxxx1x2xxxxxxx 阅读(291) 评论(0) 推荐(0)

访何红辉：谈谈Android源码中的设计模式

摘要：最近Android 6.0版本的源代码开放下载，刚好分析Android源码的技术书籍《Android源码设计模式解析与实战》上市，我们邀请到它的作者何红辉，来谈谈Android源码中的设计模式，以及近期Android开发中的一些热点话题。受访嘉宾介绍：何红辉（@MrSimp1e），前友盟Androi... 阅读全文

posted @ 2016-01-09 15:07 xxxxxxxx1x2xxxxxxx 阅读(290) 评论(0) 推荐(0)

Android 开源项目源码解析（第二期）

摘要：Android 开源项目源码解析（第二期）阅读目录 android-Ultra-Pull-To-Refresh 源码解析 DynamicLoadApk 源码解析 NineOldAnimations 源码解析 SlidingMenu 源码解析 Cling 源码解析 BaseAdapterHe... 阅读全文

posted @ 2016-01-09 15:06 xxxxxxxx1x2xxxxxxx 阅读(171) 评论(0) 推荐(0)

Android周报

摘要：Android周报原文 http://www.race604.com/android-weekly-25/文章/教程使用 Kotlin 开发 Android 应用系列看起来用 Kotlin 来做 Android 开发的时机越来越成熟。这是一个系列译文，从入门开始介绍怎么使用 Kotlin 来开发 ... 阅读全文

posted @ 2016-01-09 15:05 xxxxxxxx1x2xxxxxxx 阅读(168) 评论(0) 推荐(0)

每个Android开发者必须知道的资源集锦

摘要：英文原文：Resources every Android developer must know随着 Android 平台持续惊人的增长，越来越多的开发人员开始工作于 Android 应用程序。而且现在的 Android 平台已经非常成熟了。这篇文章比较适合于初学者和有一定经验的 Android 开... 阅读全文

posted @ 2016-01-09 15:04 xxxxxxxx1x2xxxxxxx 阅读(176) 评论(0) 推荐(0)

Android开发周报：Flyme OS开源、经典开源项目解析

摘要：Android开发周报：Flyme OS开源、经典开源项目解析新闻《魅族Flyme OS源码上线Github》：近日魅族正式发布了MX5，并且在发布会上，魅族还宣布Flyme OS开放适配。随后，魅族正式放出了Flyme官方ROM适配工具。在众多国产UI当中，魅族Flyme也算是一款比较有特色的产... 阅读全文

posted @ 2016-01-09 15:03 xxxxxxxx1x2xxxxxxx 阅读(330) 评论(0) 推荐(0)

Android开发周报：Android L默认加密用户数据

摘要：Android开发周报：Android L默认加密用户数据新闻《iCloud前车之鉴，Android L默认开启加密功能》：iCloud 艳照风波再起，第二波女星照片流出，大量女星的裸照又开始在社交网站疯传，本次大规模的“艳照门”依然有可能是黑客利用苹果iCloud云端系统的漏洞，在破解了女艺人们... 阅读全文

posted @ 2016-01-09 15:03 xxxxxxxx1x2xxxxxxx 阅读(191) 评论(0) 推荐(0)

Android常用开源项目

摘要：Android开源项目第一篇——个性化控件(View)篇包括ListView、ActionBar、Menu、ViewPager、Gallery、GridView、ImageView、ProgressBar、TextView、其他Android开源项目第二篇——工具库篇包括依赖注入、图片缓存、网络相... 阅读全文

posted @ 2016-01-09 15:02 xxxxxxxx1x2xxxxxxx 阅读(233) 评论(0) 推荐(0)

csdn android视频播放器开发

摘要：http://blog.csdn.net/column/details/myvideo.html 阅读全文

posted @ 2016-01-09 15:01 xxxxxxxx1x2xxxxxxx 阅读(201) 评论(0) 推荐(0)

视频会议十大开源项目排行

摘要：视频会议十大开源项目排行目录(?)[+] 在视频会议领域，有许多可以值得参考的开源项目，这些开源项目有的是协议栈、有的是编码器或者是传输协议，由于视频会议系统是一个综合性的应用系统，里面包含功能较多，如能把这些开源项目选择性的加入我们的视频会议开发当中，我们的开发效率肯定会事半功倍，下面我们列举... 阅读全文

posted @ 2016-01-09 15:00 xxxxxxxx1x2xxxxxxx 阅读(1182) 评论(0) 推荐(0)

Android开源项目大全 - 工具类

摘要：主要包括那些不错的开发库，包括依赖注入框架、图片缓存、网络相关、数据库ORM建模、Android公共库、Android 高版本向低版本兼容、多媒体相关及其他。一、依赖注入DI通过依赖注入减少View、服务、资源简化初始化，事件绑定等重复繁琐工作AndroidAnnotations(Code Diet... 阅读全文

posted @ 2016-01-09 14:59 xxxxxxxx1x2xxxxxxx 阅读(285) 评论(0) 推荐(0)

2015最新安卓开源播放器排名云视链在榜

摘要：2015最新安卓开源播放器排名云视链在榜很多同学问我安卓上哪些开源播放器比较好，这里我就统一排行一下。 1.Dolphin播放器(Dolphin Player)是一款开源的音频和视频播放器，它支持大多数的音频和视频文件模式，也支持大部分的字幕文件格式。它是基于ffmpeg的。在自己手机上装了... 阅读全文

posted @ 2016-01-09 14:53 xxxxxxxx1x2xxxxxxx 阅读(1494) 评论(0) 推荐(0)

GitHub 优秀的 Android 开源项目

摘要：GitHub 优秀的 Android 开源项目主要介绍那些不错个性化的View，包括ListView、ActionBar、Menu、ViewPager、 Gallery、GridView、ImageView、ProgressBar及其他如Dialog、Toast、EditText、 TableVie... 阅读全文

posted @ 2016-01-09 14:52 xxxxxxxx1x2xxxxxxx 阅读(409) 评论(0) 推荐(0)

android视频库Vitamio

摘要：之前尝试自己解码视频，然后播放显示，虽然音视频都可以播放，但是实现不了音视频的同步，所以使用第三方的视频库Vitamio来实现视频播放器功能，这样自己只需要实现播放解码的制作不不要关心底层解码和显示问题。是使用Vitamio 4.0，制作的视频播放器，后续会继续添加直播，网络播放功能。实现的主要功能... 阅读全文

posted @ 2016-01-09 14:51 xxxxxxxx1x2xxxxxxx 阅读(334) 评论(0) 推荐(0)

开源安卓播放器：Dolphin Player 简单分析

摘要：开源安卓播放器：Dolphin Player 简单分析Dolphin播放器(Dolphin Player)是一款开源的音频和视频播放器，它支持大多数的音频和视频文件模式，也支持大部分的字幕文件格式。它是基于ffmpeg的。项目主页：http://code.google.com/p/dolphin-p... 阅读全文

posted @ 2016-01-09 14:50 xxxxxxxx1x2xxxxxxx 阅读(253) 评论(0) 推荐(0)

视频播放器——开源免费三大代表

摘要：视频播放器——开源免费三大代表视频播放工具，因为要面临庞大的兼容性和纷繁复杂的算法，从架构上看，能脱颖而出的体系屈指可数。大体来说业界主要有3大构架：MPC、MPlayer和 VLC。这3大架构及其衍生品占领了90%的市场，凡是用户能看到的免费媒体播放软件，无一不是源自这3大架构。 MPC/HC（阅读全文

posted @ 2016-01-09 14:45 xxxxxxxx1x2xxxxxxx 阅读(50816) 评论(0) 推荐(0)

oschina 编程语言

摘要：编程语言JavaC/C++Objective-CPHPPerlPythonRubyC#.NETASPGoogle GoD语言GroovyScalaJavaScriptTypeScriptHTML/CSSActionScriptVBScriptDelphi/PascalBasicErLangCOBOL... 阅读全文

posted @ 2016-01-09 14:40 xxxxxxxx1x2xxxxxxx 阅读(166) 评论(0) 推荐(0)

oschina Web应用开发

摘要：Web应用开发SPDY开发包(13)HTML5开发相关(105)Pjax相关项目(4)网站API(93)REST/RESTful项目(72)响应式 Web 框架(27)微信相关软件(63)JavaScript MVC 框架(45)WebDAV 开源软件(31)AngularJS 扩展(70)Goog... 阅读全文

posted @ 2016-01-09 14:39 xxxxxxxx1x2xxxxxxx 阅读(137) 评论(0) 推荐(0)

oschina jQuery 插件

摘要：jQuery 插件jQuery自动完成插件(25)jQuery分页插件(20)jQuery 文件上传(21)jQuery 地图插件(14)jQuery对话框(109)jQuery图片展示/幻灯插件(215)jQuery图表(32)jQuery Tabs(22)jQuery UI框架(36)jQuer... 阅读全文

posted @ 2016-01-09 14:38 xxxxxxxx1x2xxxxxxx 阅读(144) 评论(0) 推荐(0)

oschina 手机/移动开发

摘要：手机/移动开发Android UI 组件(167)React Native 相关(8)网站客户端(16)NativeScript 插件(18)iPhone/iPad开发工具(16)WP7开发工具(22)手机开发工具(173)手机Web开发框架(115)手机开发包(227)手机相关软件(415)手机游... 阅读全文

posted @ 2016-01-09 14:38 xxxxxxxx1x2xxxxxxx 阅读(139) 评论(0) 推荐(0)

oschina 建站系统

摘要：建站系统分类网站程序(9)众筹平台(2)团购网站系统(14)开源轻博客系统(8)开源博客系统(279)视频网站系统(9)开源微博工具(93)论坛系统BBS(129)建站系统CMS(565)网店系统/电子商务(183)SNS社交网络/交友平台(141)开源问答系统(19)WIKI系统(86)个人知识管... 阅读全文

posted @ 2016-01-09 14:37 xxxxxxxx1x2xxxxxxx 阅读(136) 评论(0) 推荐(0)

Filezilla出现中文乱码

摘要：使用Filezilla client FTP客户端登陆某些FTP站点会出现中文乱码,原因是FTP服务器端编码与filezilla client端编码不一致造成的，解决方法如下：文件-站点管理-选中要登陆的站点-字符集-选择”强制UTF-8″ 或使用自定义字符集GB2312,二者之一定能解决中文显示... 阅读全文

posted @ 2016-01-09 14:18 xxxxxxxx1x2xxxxxxx 阅读(694) 评论(0) 推荐(0)

从零开始，创建GitHub团队开发环境

摘要：从零开始，创建GitHub团队开发环境GitHub提供免费的团队环境，不过免费仓库容量是300MB，请大家注意。申请GitHub个人账号1. 使用浏览器访问GitHub主页。如果使用IE，尽量不使用IE9以下的版本。2.1. 没有申请过GitHub账号，请点击绿色的【Sign up for free... 阅读全文

posted @ 2016-01-08 10:28 xxxxxxxx1x2xxxxxxx 阅读(231) 评论(0) 推荐(0)

Xsoup 是一款基于 Jsoup 开发的

摘要：Xsoup 是一款基于 Jsoup 开发的，使用XPath抽取Html元素的工具。它被用于作者的爬虫框架 WebMagic 中，进行XPath 解析和抽取。此次更新主要增加了一些XPath语法的支持。增加contains支持 #2：?1//div[contains(@id,'test')]增加筛选条... 阅读全文

posted @ 2016-01-06 14:43 xxxxxxxx1x2xxxxxxx 阅读(489) 评论(0) 推荐(0)

QT4和QT3的区别

摘要：著名的QT库前一阵子升级到4.xx版本了，我目前在开发的一个基于QT3的软件，由于受到QThread的各种困扰，因此打算尝试将代码升级到QT4，但是当我实际开始升级工作后，才发现QT3和QT4的变化实在是太大了，最后导致我几乎修改了程序中的所有文件，幸好目前开发工作还只是开了个头，只修改了40多... 阅读全文

posted @ 2016-01-06 13:01 xxxxxxxx1x2xxxxxxx 阅读(591) 评论(0) 推荐(0)

Qt4与Qt3的主要不同

摘要：Qt4与Qt3的主要不同1）QT4中提供了大量新控件，虽然它也保持了旧的控件，并命名为Qt3XXX，但是这样的控件没准在今后的哪个QT版本中就不被支持了，所以还是换吧，控件替换的工作是巨大的，这些新的控件使用了新的方法、属性、和事件名称，虽然是比以前更规范了，但是对于升级旧代码来说，则增加了大量工... 阅读全文

posted @ 2016-01-06 12:56 xxxxxxxx1x2xxxxxxx 阅读(900) 评论(0) 推荐(0)

Qt3升至Qt4需要注意的几件事项浅谈

摘要：Qt3升至Qt4需要注意的几件事项浅谈公司以前的项目是用Qt3写的，随着时间的推移慢慢显示出Qt3有多方面的限制，因此先公司决定用Qt4来改写这个项目，并为软件添加新功能，在此背景先编写此文章。先扯一下没用的：gotfocus是获得焦点时触发，Lostfocus是失去焦点的时候触发。比如：新建两个文... 阅读全文

posted @ 2016-01-06 12:51 xxxxxxxx1x2xxxxxxx 阅读(844) 评论(0) 推荐(0)

netbeans常用快捷键

摘要：netbeans常用快捷键1、Application应用程序的参数args的设置，在Build->Set Main Projects Configuration 2、程序运行快捷键F6 3、@Deprecated 4、代码自动完成Ctrl+Space，利用这个可以添加类的构造函数 5、变量统一修改C... 阅读全文

posted @ 2016-01-06 10:26 xxxxxxxx1x2xxxxxxx 阅读(393) 评论(0) 推荐(0)

ideaic快捷键

摘要：Intellij IDEA中有很多快捷键让人爱不释手，stackoverflow上也有一些有趣的讨论。每个人都有自己的最爱，想排出个理想的榜单还真是困难。以前也整理过Intellij的快捷键，这次就按照我日常开发时的使用频率，简单分类列一下我最喜欢的十大快捷-神-键吧。1智能提示Intellij首当... 阅读全文

posted @ 2016-01-06 10:25 xxxxxxxx1x2xxxxxxx 阅读(429) 评论(0) 推荐(0)

配置nutch

摘要：配置nutch（nutch文件夹已在/home目录下）1. 修改系统环境变量sudo gedit /etc/profile//增加#set nutchexport PATH=/home/nutch/runtime/local/bin:$PATH2. 测试（nutch/runtime/local/bi... 阅读全文

posted @ 2016-01-05 17:42 xxxxxxxx1x2xxxxxxx 阅读(178) 评论(0) 推荐(0)

Eclipse GlassFish Server 配置

摘要：一、下载GlassFish Server 通过如下地址下载合适版本： http://glassfish.java.net/public/downloadsindex.html http://www.oracle.com/technetwork/java/javaee/downloads/ogs-3... 阅读全文

posted @ 2016-01-05 17:29 xxxxxxxx1x2xxxxxxx 阅读(338) 评论(0) 推荐(0)

bash: : Too many levels of symbolic links

摘要：ln -s 时bash: : Too many levels of symbolic links改为绝对路径，阅读全文

posted @ 2016-01-05 17:26 xxxxxxxx1x2xxxxxxx 阅读(332) 评论(0) 推荐(0)

Nutch网页抓取速度优化

摘要：Nutch网页抓取速度优化Here are the things that could potentially slow down fetching1) DNS setup2) The number of crawlers you have, too many, too few.3) Bandwid... 阅读全文

posted @ 2016-01-05 17:10 xxxxxxxx1x2xxxxxxx 阅读(170) 评论(0) 推荐(0)

裁剪nutch 8步骤

摘要：裁剪nutch 8步骤阅读全文

posted @ 2016-01-05 16:34 xxxxxxxx1x2xxxxxxx 阅读(171) 评论(0) 推荐(0)

Nutch2.3 编译和安装配置

摘要：Nutch2.3 编译和安装配置[一]、介绍Nutch 是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。现在Nutch分为两个版本：1.x和2.x，这两个版本的主要区别在于底层的存储不同。1.x版本是基于Hadoop架构的，底层存储使用的... 阅读全文

posted @ 2016-01-05 16:30 xxxxxxxx1x2xxxxxxx 阅读(473) 评论(0) 推荐(0)

idea自动导包AutoImport设置

摘要：idea自动导包设置 1、配置进入file-setting 2、说明勾选标注第1个选项，IDEA 自动帮我们导入需要用到的包。但是对于那些同名的包，还是需要手动 Alt + Enter 进行导入的勾选标注第2个选项，IDEA自动帮我们优化导入的包，比如自动去掉一些没有用到的包。阅读全文

posted @ 2016-01-05 16:14 xxxxxxxx1x2xxxxxxx 阅读(400) 评论(0) 推荐(0)

"技术框架太多，多的眼花缭乱，如何在众多选择中找到自己的方向？

摘要："技术框架太多，多的眼花缭乱，如何在众多选择中找到自己的方向？"，经常有人这么问我。咱们从开源项目说起，可以从两个维度来对开源项目进行分类，一方面是编程语言，另一方面是应用领域。首先说编程语言，像Java、C#、PHP、C/C++、Ruby、 Python、Go、JS、SCALA等等，有非常多的编程... 阅读全文

posted @ 2016-01-05 15:08 xxxxxxxx1x2xxxxxxx 阅读(192) 评论(0) 推荐(0)

基于Nutch+Hadoop+Hbase+ElasticSearch的网络爬虫及搜索引擎

摘要：基于Nutch+Hadoop+Hbase+ElasticSearch的网络爬虫及搜索引擎网络爬虫架构在Nutch+Hadoop之上，是一个典型的分布式离线批量处理架构，有非常优异的吞吐量和抓取性能并提供了大量的配置定制选项。由于网络爬虫只负责网络资源的抓取，所以，需要一个分布式搜索引擎，用来对网络爬... 阅读全文

posted @ 2016-01-05 15:04 xxxxxxxx1x2xxxxxxx 阅读(250) 评论(0) 推荐(0)

nutch

摘要：http://www.cnblogs.com/clarkchen/archive/2011/03/10/1980194.htmlhttp://www.cnblogs.com/freebsd-pann/archive/2011/11/08/2238163.htmlhttp://www.cnblogs.... 阅读全文

posted @ 2016-01-05 14:43 xxxxxxxx1x2xxxxxxx 阅读(148) 评论(0) 推荐(0)

ant安装

摘要：ant安装：http://apache.fayea.com//ant/binaries/apache-ant-1.9.6-bin.tar.gz/etc/profile添加：export ANT_HOME=/opt/apache-ant-1.9.6/export CLASSPATH=.:$ANT_HO... 阅读全文

posted @ 2016-01-05 14:16 xxxxxxxx1x2xxxxxxx 阅读(353) 评论(0) 推荐(0)

selenium经过WebDriverWait实现ajax测试

摘要：当前位置:我的异常网» Web前端»selenium经过WebDriverWait实现ajax测试selenium经过WebDriverWait实现ajax测试www.MyException.Cn网友分享于：2013-09-12浏览：217次selenium通过WebDriverWait实现ajax... 阅读全文

posted @ 2016-01-05 11:03 xxxxxxxx1x2xxxxxxx 阅读(200) 评论(0) 推荐(0)

查看当前android设备已安装的第三方包

摘要：查看当前android设备已安装的第三方包 adbshellpmlistpackage-32 adbshell"getpropro.build.version.sdk" 阅读全文

posted @ 2016-01-05 10:46 xxxxxxxx1x2xxxxxxx 阅读(299) 评论(0) 推荐(0)

批处理学习总结之常用符号

摘要：批处理学习总结之常用符号批处理是一种简化的脚本语言，也称作宏。它应用于DOS和Windows系统中，它是由DOS或者Windows系统内嵌的命令解释器（通常是 COMMAND. COM或者CMD.EXE）解释运行。类似于Unix中的Shell脚本。批处理文件具有.bat或者.cmd的扩展名，其最简单... 阅读全文

posted @ 2016-01-05 10:44 xxxxxxxx1x2xxxxxxx 阅读(253) 评论(0) 推荐(0)

DOS批处理延时技术

摘要：DOS批处理延时技术举个例子，我们要延时5秒打开gdh.txt这个文件，可以用以下几个方法方法一：ping缺点:时间精度为1秒,不够精确 www.2cto.com @echo off@ping 127.0.0.1 -n 6 >nulstart gdh.txt 方法二：vbs start /wait... 阅读全文

posted @ 2016-01-05 10:43 xxxxxxxx1x2xxxxxxx 阅读(451) 评论(0) 推荐(0)

selenium webdriver缺陷

摘要：关闭selenium webdriver缺陷除了http://573301735.com/?p=5126讲的，昨天又发现一个让我1个小时生不如死的问题，就是使用两个不同的配置文件来初始化driver，findelement方法获取到的坐标居然不一样，使用其中一个配置文件初始化的dr... 阅读全文

posted @ 2016-01-05 10:41 xxxxxxxx1x2xxxxxxx 阅读(255) 评论(0) 推荐(0)

Appium小试

摘要：Appium小试最近有空玩了一下Appium，记录一下 1.下载Appium for windows，现在是0.12.3版本 https://bitbucket.org/appium/appium.app/downloads/ 解压后如下图双击Appium.exe就能启动Appium界面点击L 阅读全文

posted @ 2016-01-05 10:39 xxxxxxxx1x2xxxxxxx 阅读(179) 评论(0) 推荐(0)

Appium介绍

摘要：Appium介绍 Appium是一个移动端的自动化框架，可用于测试原生应用，移动网页应用和混合型应用，且是跨平台的。可用于IOS和Android以及firefox的操作系统。原生的应用是指用android或ios的sdk编写的应用，移动网页应用是指网页应用，类似于ios中safari应用或者Chro 阅读全文

posted @ 2016-01-05 10:38 xxxxxxxx1x2xxxxxxx 阅读(218) 评论(0) 推荐(0)

appium简明教程

摘要：appium简明教程什么是appium？下面这段介绍来自于appium的官网。 Appium is an open-source tool you can use to automate mobile native, mobile web, and mobile hybrid applicati 阅读全文

posted @ 2016-01-05 10:38 xxxxxxxx1x2xxxxxxx 阅读(229) 评论(0) 推荐(0)

selenium2支持无界面操作(HtmlUnit和PhantomJs)

摘要：selenium2支持无界面操作(HtmlUnit和PhantomJs)selenium2支持通过各种driver（FirfoxDriver，IternetExplorerDriver，OperaDriver，ChromeDriver）驱动真实浏览器完成测试的。其实selenium也是支持无界面浏览... 阅读全文

posted @ 2016-01-05 10:30 xxxxxxxx1x2xxxxxxx 阅读(1571) 评论(0) 推荐(0)

selenium让人摸不着头脑的问题

摘要：selenium让人摸不着头脑的问题问题一使用webdriver驱动firefox浏览器时如果不设置参数，默认使用的Firefox的profile和平时打开浏览器使用的firefox不一样，如果要使用平常使用的配置，解决方法：string sPath = @"C:\Users\xxxx\AppDa... 阅读全文

posted @ 2016-01-05 10:29 xxxxxxxx1x2xxxxxxx 阅读(197) 评论(0) 推荐(0)

页面加载时间过长

摘要：1. selenium webdriver在get方法会一直等待页面加载完毕才会执行后面的，可如果加载时间太长会导致后续操作无法进行。例如：get 汽车之家页面时会等待很长时间，其实页面基本元素都已加载，可进行后续操作可以通过set_page_load_time()方法来设定时间，然后捕获timeo... 阅读全文

posted @ 2016-01-05 10:27 xxxxxxxx1x2xxxxxxx 阅读(364) 评论(0) 推荐(0)

Selenium Test 自动化测试入门级学习笔记

摘要：Selenium Test 自动化测试入门级学习笔记1、下载安装Firefox-selenium插件需要下载插件可以联系，这里暂不提供下载地址。　2、集成Eclipse 需要下载jar包可以联系，这里暂不提供下载地址。集成Eclipse非常简单，加载进去jar包就OK！3、通过Sele... 阅读全文

posted @ 2016-01-05 10:25 xxxxxxxx1x2xxxxxxx 阅读(186) 评论(0) 推荐(0)

Selenium 2.0 WebDriver 自动化测试使用教程实例教程 API快速参考

摘要：Selenium 2.0 WebDriver 自动化测试使用教程实例教程 API快速参考//System.setProperty("webdriver.firefox.bin", "E:/firefox/firefox.exe");//FirefoxDriver dr = new Firefox... 阅读全文

posted @ 2016-01-05 10:24 xxxxxxxx1x2xxxxxxx 阅读(159) 评论(0) 推荐(0)

Selenium执行测试脚本稳定性的一些经验分享交流

摘要：Selenium执行测试脚本稳定性的一些经验分享交流公司的自动化WEB测试框架IATA已上线运行了一段时间，期间发现一些脚本稳定性的问题，与大家分享一下。 CASE执行游览器：ie firefox chrome 稳定性问题一、在持续执行WEB自动化的过程中，如需持续执行脚本，比如持续跑... 阅读全文

posted @ 2016-01-05 10:23 xxxxxxxx1x2xxxxxxx 阅读(424) 评论(0) 推荐(0)

怎么等待页面元素加载完成

摘要：怎么等待页面元素加载完成web的自动化测试中，我们经常会遇到这样一种情况：当我们的程序执行时需要页面某个元素，而此时这个元素还未加载完成，这时我们的程序就会报错。怎么办？等待。等待元素出现后再进行对这个元素的操作。在selenium-webdriver中我们用两种方式进行等待：明确的等待和隐性的等待... 阅读全文

posted @ 2016-01-05 10:15 xxxxxxxx1x2xxxxxxx 阅读(438) 评论(0) 推荐(0)

如何智能的等待页面加载完成

摘要：如何智能的等待页面加载完成web的自动化测试中，我们经常会遇到这样一种情况：点击1个按钮，页面上会弹出1个iframe，这时候脚本就需要去等待iframe加载完毕才能进行后续的操作。在这种情况下，我们一般的处理思路是等待被等待对象上的某个子元素出现，当这个子元素出现时我们就认为该对象已经加载完毕，代... 阅读全文

posted @ 2016-01-05 10:09 xxxxxxxx1x2xxxxxxx 阅读(281) 评论(0) 推荐(0)

filezilla安装

摘要：[alexus@wcmisdlin02 bin]$ ./filezilla ./filezilla: /lib64/libstdc++.so.6: version `CXXABI_1.3.8' not found (required by ./filezilla)./filezilla: /lib6... 阅读全文

posted @ 2016-01-05 06:01 xxxxxxxx1x2xxxxxxx 阅读(408) 评论(0) 推荐(0)

《深入理解OSGi：Equinox原理、应用与最佳实践》笔记_1_运行最简单的bundlehelloworld

摘要：《深入理解OSGi：Equinox原理、应用与最佳实践》笔记_1_运行最简单的bundlehelloworld 买了周大大的OSGI的书看先前完全没有基础就靠这本书看看学学顺便记一些笔记今天先跳到了第5章的equinox启航部分第一个简单的helloworld就遇到了问题....因为eclip... 阅读全文

posted @ 2016-01-05 05:10 xxxxxxxx1x2xxxxxxx 阅读(188) 评论(0) 推荐(0)

《深入理解OSGi：Equinox原理、应用与最佳实践》笔记_2_建立开发环境

摘要：本文对应书本5.1.3的内容书本中通过CVS下载的源码但是笔者实践的时候发现无法下载...地址已经失效了(也许是笔者的失误输错地址所致)可以用git下载地址是:http://git.eclipse.org/c/equinox进入需要下载的组件的页面在最下面有git clone的地址http://g... 阅读全文

posted @ 2016-01-05 05:09 xxxxxxxx1x2xxxxxxx 阅读(249) 评论(0) 推荐(0)

c#抓取动态页面WebBrowser

摘要：在ajax横行的年代，很多网页的内容都是动态加载的，而我们的小爬虫抓取的仅仅是web服务器返回给我们的html，这其中就跳过了js加载的部分，也就是说爬虫抓取的网页是残缺的，不完整的，下面可以看下博客园首页从首页加载中我们看到，在页面呈现后，还会有5个ajax异步请求，在默认的情况下，爬虫是抓... 阅读全文

posted @ 2016-01-04 18:40 xxxxxxxx1x2xxxxxxx 阅读(2435) 评论(0) 推荐(0)

PhantomJS是一个基于WebKit的服务器端JavaScript API

摘要：PhantomJS是一个基于WebKit的服务器端JavaScript API，它基于 BSD开源协议发布。PhantomJS无需浏览器的支持即可实现对Web的支持，且原生支持各种Web标准，如DOM 处理、JavaScript、CSS选择器、JSON、Canvas和可缩放矢量图形SVG。Phant... 阅读全文

posted @ 2016-01-04 18:35 xxxxxxxx1x2xxxxxxx 阅读(304) 评论(0) 推荐(0)

SynchronousQueue、LinkedBlockingQueue、ArrayBlockingQueue性能测试

摘要：SynchronousQueue、LinkedBlockingQueue、ArrayBlockingQueue性能测试 JDK6对SynchronousQueue做了性能优化，避免对竞争资源加锁，所以想试试到底平时是选择SynchronousQueue还是其他BlockingQueue。对于容... 阅读全文

posted @ 2016-01-04 17:30 xxxxxxxx1x2xxxxxxx 阅读(210) 评论(0) 推荐(0)

JDK源码分析—— ArrayBlockingQueue 和 LinkedBlockingQueue

摘要：JDK源码分析—— ArrayBlockingQueue 和 LinkedBlockingQueue目的：本文通过分析JDK源码来对比ArrayBlockingQueue 和LinkedBlockingQueue，以便日后灵活使用。1. 在Java的Concurrent包中，添加了阻塞队列Block... 阅读全文

posted @ 2016-01-04 17:22 xxxxxxxx1x2xxxxxxx 阅读(537) 评论(0) 推荐(0)

ArrayBlockingQueue和LinkedBlockingQueue的区别

摘要：ArrayBlockingQueue和LinkedBlockingQueue的区别，得出结论如下：1. 队列中锁的实现不同 ArrayBlockingQueue实现的队列中的锁是没有分离的，即生产和消费用的是同一个锁； LinkedBlockingQueue实现的队列中... 阅读全文

posted @ 2016-01-04 17:21 xxxxxxxx1x2xxxxxxx 阅读(372) 评论(0) 推荐(0)

Net处理html页面元素工具类(HtmlAgilityPack.dll)的使用

摘要：现在，在不少应用场合中都希望做到数据抓取，特别是基于网页部分的抓取。其实网页抓取的过程实际上是通过编程的方法，去抓取不同网站网页后，再进行分析筛选的过程。比如，有的比较购物网站，会同时去抓取不同购物网站的数据并将其保存在数据库中。一般，这些网页的抓取都需要对抓取回来的HTML进行解析。.NET提... 阅读全文

posted @ 2016-01-04 13:30 xxxxxxxx1x2xxxxxxx 阅读(513) 评论(0) 推荐(0)

WebView混合开发

摘要：现在开发APP的方式变化，不在是传统的APP开发了，有很多的APP慢慢的转向混合模式的开发，使用WebView是传统开发模式转向混合模式的桥梁工具，结合了很多的Web前端开发界面，使得开发的速度加快，下面介绍Android中WebView的基础使用。在开发过程中应该注意几点： 1.Android... 阅读全文

posted @ 2016-01-04 12:35 xxxxxxxx1x2xxxxxxx 阅读(236) 评论(0) 推荐(0)

对付"反盗链"

摘要：对付"反盗链"某些站点有所谓的反盗链设置，其实说穿了很简单，就是检查你发送请求的header里面，referer站点是不是他自己，所以我们只需要像把headers的referer改成该网站即可，以cnbeta为例：#...headers = { 'Referer':'http://www.cn... 阅读全文

posted @ 2016-01-04 11:35 xxxxxxxx1x2xxxxxxx 阅读(142) 评论(0) 推荐(0)

Heritrix与Nutch对比

摘要：Nutch 开发语言：Java http://lucene.apache.org/nutch/ 简介： Apache的子项目之一，属于Lucene项目下的子项目。 Nutch是一个基于Lucene，类似Google的完整网络搜索引擎解决方案，基于Hadoop的分布式处理模型保证了系统的性能，类似Ec 阅读全文

posted @ 2016-01-04 11:22 xxxxxxxx1x2xxxxxxx 阅读(287) 评论(0) 推荐(0)

基于FP-Tree的关联规则FP-Growth推荐算法Java实现

摘要：基于FP-Tree的关联规则FP-Growth推荐算法Java实现package edu.test.ch8;import java.util.ArrayList;import java.util.List;public class Item implements Comparable { pr... 阅读全文

posted @ 2016-01-04 11:02 xxxxxxxx1x2xxxxxxx 阅读(483) 评论(0) 推荐(0)

爬虫登陆验证过程

摘要：混合模式结合二、三两大步，通过模拟点击快速拿到cookie，虽然效率低，但可以减少数据包分析的时间以及解决搞不定ajax登陆验证的烦恼，然后继续用urllib2拼接cookie继续快速获取数据。分下面两步：a. 从selenium中拿到cookieb. 添加cookie给urllib2使用方法1：使... 阅读全文

posted @ 2016-01-04 11:00 xxxxxxxx1x2xxxxxxx 阅读(245) 评论(0) 推荐(0)

selenium + firefox/chrome/phantomjs登陆之模拟点击

摘要：登陆之模拟点击工具：python/java + selenium + firefox/chrome/phantomjs（1）windows开发环境搭建默认已经安装好了firefox安装pippip是一个python的软件包管理工具，用于自动下载并安装、更新python包，python3之后的某些版本... 阅读全文

posted @ 2016-01-04 10:57 xxxxxxxx1x2xxxxxxx 阅读(778) 评论(0) 推荐(0)

firebug登陆之数据包分析

摘要：登陆之数据包分析工具: python-urllib2 | firefox+firebug或者chrome，用浏览器打开登陆页面之后，按F12键会默认打开开发者工具或者启动firebug，点击network监听数据包，下面以itune的登陆举一个例子。1. 在浏览器中输入itunes的登陆地址：htt... 阅读全文

posted @ 2016-01-04 10:57 xxxxxxxx1x2xxxxxxx 阅读(648) 评论(0) 推荐(0)

谈谈android反编译和防止反编译的方法(转)

摘要：谈谈android反编译和防止反编译的方法(转)android基于java的，而java反编译工具很强悍，所以对正常apk应用程序基本上可以做到100%反编译还原。因此开发人员如果不准备开源自己的项目就需要知道怎样防止反编译和反编译他人的项目来学习。2.3版本以上在eclipse自动生成的defau... 阅读全文

posted @ 2016-01-03 16:59 xxxxxxxx1x2xxxxxxx 阅读(270) 评论(0) 推荐(0)

7款开源Java反编译工具

摘要：今天我们要来分享一些关于Java的反编译工具，反编译听起来是一个非常高上大的技术词汇，通俗的说，反编译是一个对目标可执行程序进行逆向分析，从而得到原始代码的过程。尤其是像.NET、Java这样的运行在虚拟机上的编程语言，更容易进行反编译得到源代码。当然，也有一些商业软件，对其程序进行了混淆加密，这样... 阅读全文

posted @ 2016-01-03 16:56 xxxxxxxx1x2xxxxxxx 阅读(368) 评论(0) 推荐(0)

dell N5010

摘要：Inspiron N5010Microsoft Windows 10 企业版 (64位)(英特尔)Intel(R) Core(TM) i3 CPU M 370 @ 2.40GHz(2400 Mhz)主板 0YXXJJ4.00 GB ( 1333 MHz)主硬盘 320 GB (希捷 ST932042... 阅读全文

posted @ 2016-01-03 13:54 xxxxxxxx1x2xxxxxxx 阅读(138) 评论(0) 推荐(0)

centos7 teamviewer

摘要：Step 1: Install the prerequisites.# yum install glibc alsa-lib freetype libICE libSM libX11 libXau libXdamage libXext libXfixes libXi libXrandr libXre... 阅读全文

posted @ 2016-01-02 18:43 xxxxxxxx1x2xxxxxxx 阅读(353) 评论(0) 推荐(0)

E40笔记本无线网卡

摘要：E40笔记本无线网卡详情网卡名称 Intel(R) Dual Band Wireless-AC 3160 网卡厂商英特尔 Mac地址 34:E6:AD: 规格-基本要素状态Launched发行日期 Q3'13主板板型HMC/M.2重量（克）3.4操作温度范围0°C to 80°C支持的操作系统W... 阅读全文

posted @ 2016-01-02 12:12 xxxxxxxx1x2xxxxxxx 阅读(552) 评论(0) 推荐(0)

openwrt上wifi探针的实现----mt7620a+rt2860v2

摘要：openwrt上wifi探针的实现----mt7620a+rt2860v2[摘要：甚么是wifi探针看到探针，感到很矮小上的模样，实在便是经过wifi汇集经由那个AP局限的脚机的mac地点，出有甚么深入的器械，知乎上闭于那个器械接头的良多，有人认为很有效，能够] 什么是wifi探针看到探针，感觉很... 阅读全文

posted @ 2016-01-02 11:54 xxxxxxxx1x2xxxxxxx 阅读(707) 评论(0) 推荐(0)

blink接收器

摘要：blink:[autorun] OPEN="AutoInst.exe" [AskRebootTitle] Dlg1=System Settings Change Dlg2=št²Î³]©wÅÜ§ó [Product] Model=RT2870 [Setting] CheckRebootWaitTim... 阅读全文

posted @ 2016-01-02 11:06 xxxxxxxx1x2xxxxxxx 阅读(302) 评论(0) 推荐(0)

error:cannot load file (code:5555h);bootauto.ini

摘要：最近发现有的网友在使用Ghost XP盘安装系统的时候，选择一键ghost到C盘出现下面的错误：error:cannot load file (code:5555h);bootauto.ini（或bootdm.ini、bcdwbcdw.ini等）press any key to boot from ... 阅读全文

posted @ 2016-01-02 09:50 xxxxxxxx1x2xxxxxxx 阅读(419) 评论(0) 推荐(0)

yyyyyyyyyyyyyyyyyyyy

公告

01 2016 档案