上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 50 下一页
2017年1月10日
Mongodb查询提示com.MongoDB.MongoException: too much data for sort() with no index
摘要： 解决办法： 查询数据量太大，添加索引即可解决问题 通过scrapy爬行完数据后，通过db.wooyun.drops.ensureIndex({"datetime":1}) 阅读全文
posted @ 2017-01-10 13:50 Agoly 阅读(222) 评论(0) 推荐(0) 编辑
linux下实现shell脚本自动连接mongodb数据库并创建索引
摘要： 在linux下创建shell脚本 chmod 755 test.sh 因为自己是在windows下编辑的shell脚本，然后上传 所以在linux上执行 -bash: ./test.sh: /bin/bash^M: bad interpreter: No such file or directory 阅读全文
posted @ 2017-01-10 11:28 Agoly 阅读(5183) 评论(0) 推荐(0) 编辑
2017年1月9日
linux上安装rar解压软件
摘要： 描述：Linux默认自带ZIP压缩，最大支持4GB压缩，RAR的压缩比大于4GB. 下载 # wget http://www.rarsoft.com/rar_CN/rarlinux-3.9.3.tar.gz # tar -xzvf rarlinux-3.9.3.tar.gz rar/ rar/rea 阅读全文
posted @ 2017-01-09 14:48 Agoly 阅读(10337) 评论(0) 推荐(0) 编辑
2017年1月5日
sip协议音视频性能测试
摘要： http://www.cnblogs.com/wxiaoqin/p/3629926.html https://www.myvoipapp.com/cn/docs/faq/performance_test_report/ http://workspace.fx114.net/qa-277-147539 阅读全文
posted @ 2017-01-05 16:25 Agoly 阅读(622) 评论(0) 推荐(0) 编辑
2017年1月3日
解决关键SSL安全问题和漏洞
摘要： 解决关键SSL安全问题和漏洞 解决关键SSL安全问题和漏洞 SSL(安全套接字层)逐渐被大家所重视，但是最不能忽视的也是SSL得漏洞，随着SSL技术的发展，新的漏洞也就出现了，下面小编就为大家介绍简单七步教你如何解决关键SSL安全问题和漏洞 SSL(安全套接字层)广泛地用于Web浏览器与服务器之间的 阅读全文
posted @ 2017-01-03 10:02 Agoly 阅读(2965) 评论(0) 推荐(0) 编辑
2016年12月28日
mongodb提示api-ms-win-crt-runtimel1-1-0.dll缺失的解决方案
摘要： mongodb提示api-ms-win-crt-runtimel1-1-0.dll缺失的解决方案 官方最新版的mongodb需要： VC++2015 RC x64的支持，否则会报出 错误原因： 官方最新版的MongoDB需要： VC++2015 RC x64的支持，否则会报出 下载网址：https: 阅读全文
posted @ 2016-12-28 15:18 Agoly 阅读(7582) 评论(1) 推荐(0) 编辑
2016年12月27日
MongoVUE1.6.9破解启动提示System.ArgumentException: 字体“Courier New”不支持样式“Regular”
摘要： 用MongoVUE，发现报错，报错信息如下： System.ArgumentException: 字体“Courier New”不支持样式“Regular”。 说明本机字体安装不够：需安装完整的Courier New字体，百度下载后，并将.ttf文件拷贝到到C:\Windows\Fonts下，win 阅读全文
posted @ 2016-12-27 18:04 Agoly 阅读(1578) 评论(0) 推荐(0) 编辑
2016年12月26日
SyntaxError: (unicode error) 'utf8' codec can't decode byte 0xd4
摘要： Scrapy异常 阅读全文
posted @ 2016-12-26 10:51 Agoly 阅读(1688) 评论(0) 推荐(0) 编辑
2016年12月23日
设置NotePad++设置"不打开上次关闭的文件"
摘要： notepad++是一个很好的记事本工具，但是默认会记录上次打开时未关闭的文件，但是实际上用起来并不方便， 可以按照下面的方式去除，notepad++版本：v6.6.2,os：win7 64位 按照以下设置： 设置-》首选项-》备份-》记住最后打开的文件，将前面的勾选去掉，然后点击关闭并重启即可。 阅读全文
posted @ 2016-12-23 23:14 Agoly 阅读(11884) 评论(1) 推荐(3) 编辑
2016年12月21日
Scrapy shell调试网页的信息
摘要： 通过scrapy shell "http://www.thinkive.cn:10000/zentaopms/www/index.php?m=user&f=login" 证明登录成功 http://www.360doc.com/content/15/0414/20/12067640_46322320 阅读全文
posted @ 2016-12-21 23:30 Agoly 阅读(983) 评论(0) 推荐(0) 编辑
scrapy爬虫结果插入mysql数据库
摘要： 1.通过工具创建数据库scrapy 2.在scrapy数据库中创建douban表 3.在scrapy爬虫代码中设置指向数据库的参数pipeline.py 在setting.py文件中设置 4.安装MySQLdb驱动 MySQL-python-1.2.3.win-amd64-py2.7.exe 查看驱 阅读全文
posted @ 2016-12-21 15:35 Agoly 阅读(13226) 评论(0) 推荐(0) 编辑
xpath定位实战（1）
摘要： 1.执行scrapy shell "https://book.douban.com/subject/2256039/" 通过火狐浏览器的firebug和firepath插件查看页面元素的xpath 注意： 1.通过text()获取元素的属性值 阅读全文
posted @ 2016-12-21 10:39 Agoly 阅读(281) 评论(0) 推荐(0) 编辑
2016年12月20日
Scrapy框架实现爬虫
摘要： 实战中的遇到的问题总结： 1. 解决方法： 只需要在print前面加tab键就可以了，即：后面需要缩进。 2.在win7下运行response.xpath报错的解决方法 解决方法： 将‘’单引号改成双引号“” 问题解决 3.在win7中的scrapy shell中使用变量调试 去除换行符： 去除空格 阅读全文
posted @ 2016-12-20 22:04 Agoly 阅读(487) 评论(0) 推荐(0) 编辑
JMeter中HTTP Cookie 管理器使用
摘要： 案例： 在一次做公司OA系统的时候，发现录制脚本无法回放成功，通过定位，是因为登录的过程中存在重定向，导致登录接口的状态没有自动带入重定向页面 解决方法： 加入HTTP Cookie 管理器使用 现象：发现回放，一直在登录界面 问题说明：一般在登录页面，通过登录接口，然后重定向到首页或者其他页面，需 阅读全文
posted @ 2016-12-20 15:10 Agoly 阅读(4241) 评论(0) 推荐(0) 编辑
JMeter执行dos命令
摘要： 1.通过java代码实现 参考Java实现操作dos命令 2.直接通过JMeter内置的beanshell脚本操作 String command = "cmd /c start ping www.baidu.com";Runtime rt = Runtime.getRuntime();Process 阅读全文
posted @ 2016-12-20 13:25 Agoly 阅读(3139) 评论(0) 推荐(0) 编辑
Java实现操作dos命令
摘要： java实现操作dos命令的两种方式 1.读取文件中的命令 运行结果如下： 第二种方式，直接读取命令 阅读全文
posted @ 2016-12-20 12:41 Agoly 阅读(8212) 评论(0) 推荐(0) 编辑
2016年12月19日
linux命令重定向文件
摘要： 22 阅读全文
posted @ 2016-12-19 21:28 Agoly 阅读(364) 评论(0) 推荐(0) 编辑
linux内存和虚拟内存的使用
摘要： http://lxshopping.blog.51cto.com/4542643/1573947 阅读全文
posted @ 2016-12-19 11:24 Agoly 阅读(754) 评论(0) 推荐(0) 编辑
2016年12月15日
Scrapy创建zentao爬虫
摘要： 1.安装好Scrapy爬虫框架 2.切换到F盘的wooyun目录下执行：scrapy startproject zentao 这个命令会在当前目录下创建一个新目录zentao，它的结构如下： 3.通过tree /f命令查看目录结果 这些文件主要是： scrapy.cfg: 项目配置文件 zentao 阅读全文
posted @ 2016-12-15 20:18 Agoly 阅读(403) 评论(0) 推荐(0) 编辑
windows7 64位下环境搭建scrapy爬虫框架
摘要： 适用于python 2.7 64位安装 一、操作系统：WIN7 64位 二、python版本：2.7 64位（scrapy目前不支持3.x） 不确定位数的，看图 三、安装以下软件包： 如果配置环境的时候是直接pip install scrapy安装的，但是在过程中出现一些错误，发现是由于以下软件安装 阅读全文
posted @ 2016-12-15 17:51 Agoly 阅读(1281) 评论(0) 推荐(0) 编辑
上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 50 下一页