摘要: 1. 创建项目 2. 创建爬虫(项目目录下 cd <projectName>) 3. 运行爬虫(项目目录下) 爬虫技巧 设置setting.py 1. 设置不遵循 ROBOTSTXT_OBEY 2. 设置延时 3. 设置 USER_AGENT 和 DEFAULT_REQUEST_HEADERS 4. 阅读全文
posted @ 2018-01-10 12:02 yugengde 阅读(384) 评论(0) 推荐(0) 编辑
摘要: sudo apt-get install samba mkdir /var/share sudo useradd -m samba sudo passwd samba smbpasswd -a samba cat /etc/samba/smb.conf [forwin] vaild users = 阅读全文
posted @ 2018-07-19 09:35 yugengde 阅读(101) 评论(0) 推荐(0) 编辑
摘要: sudo apt-get install xrdp sudo apt-get install vnc4server tightvncserver sudo apt-get install xfce4 [安装是有个配置选项:选择默认即可, 好像是kdm,具体不记得了]vim .xsession xfc 阅读全文
posted @ 2018-07-05 14:51 yugengde 阅读(550) 评论(0) 推荐(0) 编辑
摘要: 选择,插入,希尔 快,堆,归并 阅读全文
posted @ 2018-07-03 16:53 yugengde 阅读(77) 评论(0) 推荐(0) 编辑
摘要: " 更新时间:2018-05-11 12:15:21 " 定义快捷键的前缀,即 <Leader>let mapleader=";" " >>" 文件类型侦测 " 开启文件类型侦测filetype on" 根据侦测到的不同类型加载对应的插件filetype plugin on " << " >>" v 阅读全文
posted @ 2018-05-11 09:09 yugengde 阅读(195) 评论(0) 推荐(0) 编辑
摘要: 1. install.sh 2 control.sh 阅读全文
posted @ 2018-04-11 21:30 yugengde 阅读(160) 评论(0) 推荐(0) 编辑
摘要: 1 2. dir structe scrapy.cfg 阅读全文
posted @ 2018-04-10 10:29 yugengde 阅读(82) 评论(0) 推荐(0) 编辑
摘要: 1. install python3 env in centos7 阅读全文
posted @ 2018-04-09 17:15 yugengde 阅读(174) 评论(0) 推荐(0) 编辑
摘要: 1. touch model.py 2. touch sql.py 阅读全文
posted @ 2018-04-08 17:23 yugengde 阅读(104) 评论(0) 推荐(0) 编辑
摘要: 修改 /usr/bin/google (命令后面添加) --proxy-server=socks5://127.0.0.1:1080 阅读全文
posted @ 2018-04-08 16:02 yugengde 阅读(0) 评论(0) 推荐(0) 编辑
摘要: 1. create table 阅读全文
posted @ 2018-04-08 14:54 yugengde 阅读(459) 评论(0) 推荐(0) 编辑