摘要： 题记 经常会发现，很多时候我们在运行一些带有端口的程序时，程序经常会报端口被占用的问题，比如Tomcat 8080，端口起不来。 查看端口号 netstat 如果发现某个端口被占用后，可以用命令查看，该端口到底是被哪个进程所占用。命令如下： netstat pan | grep 5623 其中562 阅读全文

摘要： 题记 对于top命令来说，基本是都是linux命令入门中，第一个使用的命令，在windows中电脑如果卡顿，回去任务栏中查看cpu和内存的使用情况。top命令实现的就是这个重要的功能。 在系统维护的过程中，随时可能有需要查看 CPU 使用率，并根据相应信息分析系统状况的需要。在 CentOS 中，可 阅读全文

摘要： 1.两个字典：a={'a':1,'b':2,'c':3} b= {'aa':11,'bb':22,'cc':33} 合并1：dict(a, b) 操作如下： a={'a':1,'b':2,'c':3} b= {'aa':11,'bb':22,'cc':33} dict(a, b) {'a': 1, 阅读全文

摘要： 经常启动http服务器的时候，发现起不来，比如Tomcat，查看日志才发现提示端口已经被占用了。 这里有几个命令比较重要， 查找被占用的进程 查看 tomcat是否启动了： ps aux | grep tomcat 结果没有发现tomcat进程： root@ubuntu:/data/server/w 阅读全文

摘要： Linux系统中grep命令是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹 配的行打印出来。grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。 grep (global search regular expre 阅读全文

摘要： awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。 awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，ga 阅读全文

摘要： 题记 介绍下Python 中 map，reduce，和filter 内置函数的方法 一：map map(...) map(function, sequence[, sequence, ...]) list 对sequence中的item依次执行function(item)，执行结果输出为list。 阅读全文

摘要： 题记 有人说：virtualenv、fabric 和 pip 是 pythoneer 的三大神器。 不管认不认同，至少要先认识一下，pip现在倒是经常用到，virtualenv第一次听说，不过，总得尝试一下吧。 一、安装 pip install virtualenv 因为我已经安装了pip，那么就直 阅读全文

摘要： 题记 threading用于提供线程相关的操作，线程是应用程序中工作的最小单元。python当前版本的多线程库没有实现优先级、线程组，线程也不能被停止、暂停、恢复、中断。 threading模块提供的类： Thread, Lock, Rlock, Condition, [Bounded]Semaph 阅读全文

摘要： 题记 我们为什么需要一个爬虫框架？一个爬虫框架能帮我们做什么事情，减轻我们什么样的一些工作，我们重新梳理爬虫到底是做什么的，哪些工作是重复的工作，我们可以用框架来解决的。 一个简单的爬虫，从一个url开始，从开始的网页里面解析到所有可能的链接，通过这些链接不断的递归，抓取到全网的网页。 在这个过程中 阅读全文