yyyyyyyyyyyyyyyyyyyy

博客园 首页 新随笔 联系 订阅 管理

2015年8月16日 #

htmlparser
摘要： htmlparser使用指南需要做一个垂直搜索引擎，比较了nekohtml和htmlparser 的功能，尽管nekohtml在容错性、性能等方面的口碑好像比htmlparser好（htmlunit也用的是nekohtml），但感觉 nekohtml的测试用例和文档都比htmlparser都少，而且... 阅读全文
posted @ 2015-08-16 23:59 xxxxxxxx1x2xxxxxxx 阅读(457) 评论(0) 推荐(0)

Python的内置方法，abs,all,any,basestring,bin,bool,bytearray,callable,chr,cmp,complex,divmod
摘要： Python的内置方法abs(X):返回一个数的绝对值，X可以是一个整数，长整型，或者浮点数，如果X是一个复数，此方法返回此复数的绝对值（此复数与它的共轭复数的乘积的平方根）>>> abs(3+2j)3.605551275463989>>> abs(3-2j)3.605551275463989all... 阅读全文
posted @ 2015-08-16 23:56 xxxxxxxx1x2xxxxxxx 阅读(308) 评论(0) 推荐(0)

python项目管理
摘要： Python 通常没有对应 Java 的 Ant / Maven 这样的 build tool，有一个用于打包的 setuptools / distutils 但也并不完全等价。如果是用来管理依赖包，有 pip（特别是 -r requirements.txt 功能）。 阅读全文
posted @ 2015-08-16 23:33 xxxxxxxx1x2xxxxxxx 阅读(203) 评论(0) 推荐(0)

python不得不知的几个开源项目
摘要： 1.Trac Trac拥有强大的bug管理功能，并集成了Wiki用于文档管理。它还支持代码管理工具Subversion，这样可以在 bug管理和Wiki中方便地参考程序源代码。Trac有着比较强大的插件系统,可以通过插件来实现各种各样的功能,比如支持Git,或者增加自己的一些语法等等.如果你想了解w... 阅读全文
posted @ 2015-08-16 23:29 xxxxxxxx1x2xxxxxxx 阅读(737) 评论(0) 推荐(0)

URL的转义和解析
摘要： 在开始python编程之前我们先来看看一个关与url的知识在url中会有一些特殊字符，如果你写过cgi程序，并且提交一个表单去调用你的cgi，你会很清楚的像?name=aiqier&age=21这样的参数传递下面总结一下常见的url特殊字符的含义空格换成加号(+)正斜杠(/)分隔目录和子目录问号(... 阅读全文
posted @ 2015-08-16 23:27 xxxxxxxx1x2xxxxxxx 阅读(3552) 评论(0) 推荐(0)

fakeroot与sudo的区别
摘要： fakeroot 可以用来模拟 root 权限，以便建立特定权限与档案拥有者的压缩文件案(tar, ar, .deb 等)。透过 LD_PRELOAD 的 dynamic loader 功能，用户不必实际拥有 root 权限。fakeroot最初是为了创建debian包使用的。例如Debian在生成... 阅读全文
posted @ 2015-08-16 23:25 xxxxxxxx1x2xxxxxxx 阅读(1355) 评论(0) 推荐(0)

date、datetime、string的相互转换
摘要： import datetimeimport timestring转datetime str = '2012-11-19' date_time = datetime.datetime.strptime(str,'%Y-%m-%d') d... 阅读全文
posted @ 2015-08-16 23:14 xxxxxxxx1x2xxxxxxx 阅读(224) 评论(0) 推荐(0)

python去掉html标签
摘要： s='开始1~3& lt;?xml:namespaceprefix=ons="urn:schemas-microsoft-com:office:office"/>'importred=re.sub(']+>','',s)利用正则式处理，不知道会不会有性能问题，没有经过太多测试。目前我有很多还是使用B... 阅读全文
posted @ 2015-08-16 23:10 xxxxxxxx1x2xxxxxxx 阅读(261) 评论(0) 推荐(0)

《Python简明教程》总结
摘要： Python经典教程《Python简明教程》目录：为什么Python安装Python体验PythonPython数据类型运算符与表达式控制流函数模块数据结构解决问题面向对象输入输出异常标准库更多的内容 阅读全文
posted @ 2015-08-16 23:07 xxxxxxxx1x2xxxxxxx 阅读(223) 评论(0) 推荐(0)

python核心编程--笔记
摘要： python核心编程--笔记的解释器options:1.1 –d 提供调试输出1.2 –O 生成优化的字节码(生成.pyo文件)1.3 –S 不导入site模块以在启动时查找python路径1.4 –v 冗余输出(导入语句详细追踪)1.5 –m mod 将一个模块以脚本形式运行1.6 –Q opt ... 阅读全文
posted @ 2015-08-16 22:53 xxxxxxxx1x2xxxxxxx 阅读(297) 评论(0) 推荐(0)

httplib,urllib和urllib2
摘要： 一、httplib实现了HTTP和HTTPS的客户端协议，一般不直接使用，在python更高层的封装模块中（urllib,urllib2）使用了它的http实现。 importhttplibconn=httplib.HTTPConnection("google.com")conn.request... 阅读全文
posted @ 2015-08-16 22:51 xxxxxxxx1x2xxxxxxx 阅读(307) 评论(0) 推荐(0)

python中文utf8编码后是占3个字符,unicode汉字为2字节
摘要： 一个中文utf8编码后是占3个字符，所以求长度的函数可以这样写 def str_len(str): try: row_l=len(str) utf8_l=len(str.encode('utf... 阅读全文
posted @ 2015-08-16 22:38 xxxxxxxx1x2xxxxxxx 阅读(645) 评论(0) 推荐(0)

从底层简析Python程序的执行过程
摘要： 摘要：是否想在Python解释器的内部晃悠一圈？是不是想实现一个Python代码执行的追踪器？没有基础？不要怕，这篇文章让你初窥Python底层的奥妙。 【编者按】下面博文将带你创建一个字节码级别的追踪API以追踪Python的一些内部机制，比如类似 YIELDVALUE、YIELDFROM操作码的... 阅读全文
posted @ 2015-08-16 22:37 xxxxxxxx1x2xxxxxxx 阅读(396) 评论(0) 推荐(0)

vim添加删除多行注释
摘要： CTRL+V进入可视化模式移动光标上移或者下移，选中多行的开头选择完毕后，按大写的的I键，此时下方会提示进入“insert”模式，输入你要插入的注释符最后按ESC键，你就会发现多行代码已经被注释了.删除多行注释的方法，同样 Ctrl+v 进入列选择模式，移到光标把注释符选中，按下d，注释就被删除了。 阅读全文
posted @ 2015-08-16 22:33 xxxxxxxx1x2xxxxxxx 阅读(163) 评论(0) 推荐(0)

python binary lib on win/各种python库的二进制包
摘要： 虽然很不愿意在windows上折腾python，但有时linux不在身边的时候还得在windows上写代码。很久之前找到这个地址，后来忘了，今天搜了半天才把它找到，所以记录一下。http://www.lfd.uci.edu/~gohlke/pythonlibs/以上页面提供各种编译好的各种版本的库下... 阅读全文
posted @ 2015-08-16 22:30 xxxxxxxx1x2xxxxxxx 阅读(739) 评论(2) 推荐(1)

python使用libssh2连接linux
摘要： 1.安装(1)使用下面命令获得最新版本的ssh4py安装包 git clone git://github.com/wallunit/ssh4py (2)解压ssh4py后使用下面命令进行安装：cd ssh4py python setup.py build python setup.py instal... 阅读全文
posted @ 2015-08-16 22:25 xxxxxxxx1x2xxxxxxx 阅读(738) 评论(0) 推荐(1)

python xpath
摘要： 提取Item选择器介绍 我们有很多方法从网站中提取数据。Scrapy 使用一种叫做 XPath selectors的机制，它基于 XPath表达式。如果你想了解更多selectors和其他机制你可以查阅资料http://doc.scrapy.org/topics /selectors.html#to... 阅读全文
posted @ 2015-08-16 22:24 xxxxxxxx1x2xxxxxxx 阅读(376) 评论(0) 推荐(0)

splinter python浏览器自动化操作，模拟浏览器的行为
摘要： Splinter可以非常棒的模拟浏览器的行为，Splinter提供了丰富的API，可以获取页面的信息判断当前的行为所产生的结果最近在研究网站自动登录的问题，涉及到需要实现浏览器自动化操作，网上有不少介绍，例如使用pamie，但是只是支持IE，而且项目也较久没有更新了。还 有就是利用selenium，... 阅读全文
posted @ 2015-08-16 22:19 xxxxxxxx1x2xxxxxxx 阅读(846) 评论(0) 推荐(0)

pytesser图片文本识别
摘要： python图片文本识别使用的工具是PIL和pytesser。因为他们使用到很多的python库文件，为了避免一个个工具的安装，建议使用pythonxy，这个工具的介绍可参考baidu。pytesser是谷歌OCR开源项目的一个模块，在Python中导入这个模块即可将图片中的文字转换成文本。pyte... 阅读全文
posted @ 2015-08-16 22:10 xxxxxxxx1x2xxxxxxx 阅读(210) 评论(0) 推荐(0)

python验证码识别
摘要： 关于利用python进行验证码识别的一些想法 用python加“验证码”为关键词在baidu里搜一下，可以找到很多关于验证码识别的文章。我大体看了一下，主要方法有几类：一类是通过对图片进行处 理，然后利用字库特征匹配的方法，一类是图片处理后建立字符对应字典，还有一类是直接利用ocr模块进行识别。不管... 阅读全文
posted @ 2015-08-16 22:09 xxxxxxxx1x2xxxxxxx 阅读(433) 评论(0) 推荐(0)

Python 之 使用 PIL 库做图像处理
摘要： Python 之 使用 PIL 库做图像处理1. 简介。 图像处理是一门应用非常广的技术，而拥有非常丰富第三方扩展库的 Python 当然不会错过这一门盛宴。PIL （Python Imaging Library）是 Python 中最常用的图像处理库，目前版本为 1.1.7，我们可以在这里下载学... 阅读全文
posted @ 2015-08-16 22:09 xxxxxxxx1x2xxxxxxx 阅读(317) 评论(0) 推荐(0)

Connection reset by peer问题分析
摘要： extremetable导出excel,弹出一个下载窗口,这时不点下载而点取消，则报下面的异常:ClientAbortException Caused by: java.net.SocketException: Connection reset by peer: socket write error... 阅读全文
posted @ 2015-08-16 21:21 xxxxxxxx1x2xxxxxxx 阅读(1388) 评论(0) 推荐(0)

vmware后台运行
摘要： vmware后台运行 阅读全文
posted @ 2015-08-16 17:15 xxxxxxxx1x2xxxxxxx 阅读(290) 评论(0) 推荐(0)

fg、bg、jobs、&、nohup、ctrl + z命令
摘要： fg、bg、jobs、&、nohup、ctrl + z命令一、&加在一个命令的最后，可以把这个命令放到后台执行,如gftp &,二、ctrl + z可以将一个正在前台执行的命令放到后台，并且处于暂停状态，不可执行三、jobs查看当前有多少在后台运行的命令jobs -l选项可显示所有任务的PID，jo... 阅读全文
posted @ 2015-08-16 17:14 xxxxxxxx1x2xxxxxxx 阅读(243) 评论(0) 推荐(0)

Linux解压乱码
摘要： 1.向系统添加windows下的字符编码：sudo vim /var/lib/locales/supported.d/local添加一下编码：zh_CN.GBK GBKzh_CN.GB2312 GB2312 2.向系统中文字符添加相应编码sudo vim /var/lib/locales/suppo... 阅读全文
posted @ 2015-08-16 17:05 xxxxxxxx1x2xxxxxxx 阅读(3125) 评论(0) 推荐(0)

ls命令显示可执行的文件 ls -F
摘要： ls命令显示可执行的文件 ls -F 阅读全文
posted @ 2015-08-16 03:25 xxxxxxxx1x2xxxxxxx 阅读(455) 评论(0) 推荐(0)

Python快速教程
摘要： Python快速教程怎么能快速地掌握Python？这是和朋友闲聊时谈起的问题。Python包含的内容很多，加上各种标准库、拓展库，乱花渐欲迷人眼。我一直希望写一个快速的、容易上手的Python教程，而且言语简洁，循序渐进，让没有背景的读者也可以从基础开始学习。我将在每一篇中专注于一个小的概念，希望在... 阅读全文
posted @ 2015-08-16 03:21 xxxxxxxx1x2xxxxxxx 阅读(161) 评论(0) 推荐(0)

使用万能框架HttpHelper抓取安卓APP数据
摘要： http://www.sufeinet.com/thread-10200-1-1.html 阅读全文
posted @ 2015-08-16 03:16 xxxxxxxx1x2xxxxxxx 阅读(254) 评论(0) 推荐(0)

香蕉派 BPI-M1+ 双核开源硬件单板计算机
摘要： 香蕉派 BPI-M1+ 开源硬件开发板深圳市源创通信技术有限公司公司http://www.sinovoip.com.cn/cp_view.asp?id=562产品介绍BananaPIBPI-M1+是一款高性能双核开源硬件单板计算机，BananaPI BPI-M1+是一款比树莓派更强悍的双核Andro... 阅读全文
posted @ 2015-08-16 03:08 xxxxxxxx1x2xxxxxxx 阅读(461) 评论(0) 推荐(0)

Cubieboard4卡片式电脑
摘要： Cubieboard4 also named CC-A80, is a open source mini PC or single board computer which has ultra-powerful performance and mainly aims to office, games... 阅读全文
posted @ 2015-08-16 03:05 xxxxxxxx1x2xxxxxxx 阅读(286) 评论(0) 推荐(0)

Mixtile LOFT
摘要： 日前，国内电子原型类开发团队Mixtile（深圳致趣科技）新推出的 Mixtile LOFT套件，受到业内著名的海外科技网站CNXSoft的关注和报道。如果要阅读相关的原文报道，可点击这里。下面摘录“雷科技”的翻译稿子（稍微做了一些调整）：随着全志芯片不断发展，市面上有不少开发板子用的是他们A20的... 阅读全文
posted @ 2015-08-16 03:02 xxxxxxxx1x2xxxxxxx 阅读(151) 评论(0) 推荐(0)

关于Linux系统清理/tmp/文件夹的原理
摘要： 转自:http://www.opsers.org/base/clean-up-on-the-linux-system-tmp-folder-you-may-want-to-know.html我们知道，在Linux系统中/tmp文件夹里面的文件会被清空，至于多长时间被清空，如何清空的，可能大家知识的就... 阅读全文
posted @ 2015-08-16 02:57 xxxxxxxx1x2xxxxxxx 阅读(339) 评论(0) 推荐(0)

在大型项目上，Python 是个烂语言吗
摘要： Robert Love, Google Software Engineer and Manager on Web Search.Upvoted by Kah Seng Tay, I was the Head TA for a class taught in Java at MIT. I used…R... 阅读全文
posted @ 2015-08-16 02:49 xxxxxxxx1x2xxxxxxx 阅读(2412) 评论(0) 推荐(0)

Python：渗透测试开源项目
摘要： Python：渗透测试开源项目【源码值得精读】sql注入工具：sqlmapDNS安全监测：DNSRecon暴力破解测试工具：patatorXSS漏洞利用工具：XSSerWeb服务器压力测试工具：HULKSSL安全扫描器：SSLyze网络Scapy: send, sniff and dissect a... 阅读全文
posted @ 2015-08-16 02:11 xxxxxxxx1x2xxxxxxx 阅读(966) 评论(0) 推荐(0)

创建成功的Python项目
摘要： 创建成功的Python项目前端开发工具技巧介绍—Sublime篇SEO在网页制作中的应用观察者模式使用D3制作图表英文原文：Create successful Python projects，编译：Elaine.Ye创建一个成功的开源Python项目所涉及的并不仅仅是编写有用的代码，与其相关的还有社... 阅读全文
posted @ 2015-08-16 02:11 xxxxxxxx1x2xxxxxxx 阅读(211) 评论(0) 推荐(0)

含有换行符的正则表达式如何匹配
摘要： 含有换行符的正则表达式如何匹配:\s\S\S是各种空白字符，比如\n\t之类的，而\s是^\S点号( . )可以匹配换行符之外的任何单个字符，被称之为通配符。匹配包含\n在內的任何字符用 (.|\n)。importre strvar="""helloworld!"""patt=r'(.|\n)*'r... 阅读全文
posted @ 2015-08-16 02:09 xxxxxxxx1x2xxxxxxx 阅读(3345) 评论(0) 推荐(0)

python中打印文件名,行号,路径
摘要： print "I have a proble! And here is at Line: %s"%sys._getframe().f_linenoPDB，哈哈http://docs.python.org/library/pdb.htmlimport fileinputfileinput.filen... 阅读全文
posted @ 2015-08-16 01:55 xxxxxxxx1x2xxxxxxx 阅读(463) 评论(0) 推荐(0)

spark论坛
摘要： http://spark.apache.org/ http://bbs.csdn.net/forums/spark http://spark.csdn.net/ http://tieba.baidu.com/f?kw=spark http://www.oschina.net/p/spark-proj 阅读全文
posted @ 2015-08-16 00:35 xxxxxxxx1x2xxxxxxx 阅读(262) 评论(0) 推荐(0)

开源OCR光学字符识别
摘要： 纸张在 许多地方已日益失宠，无纸化办公谈论40多年，办公环境正限制纸山的生成。而过去几年，无纸化办公的概念发生了显着的转变。在计算机软件的帮助 下，包含大量重要管理数据和资讯的文档可以更方便的以电子形式储存。扫描文档的好处不纯粹是存档理由。为了访问基于纸张的信息和将信息整合进数字工作流， 光学字符识... 阅读全文
posted @ 2015-08-16 00:04 xxxxxxxx1x2xxxxxxx 阅读(439) 评论(0) 推荐(0)