09 2018 档案

scrapy关于将数据保存进mysql数据库及问题解决(增删查改)
摘要：1、简单的在pipelines.py上添加如下代码： 问题：需要删除到爬取数据的第一个元组，解决方法是使用if语句去除第一个元组（其中的美元符号需要除去，其中的一些数据类型如下）如下： 3、保存数据到数据库却不能使得数据重复，解决方法如下： 4、创建一个与spiders的同级的文件夹db，在其下创建 阅读全文
posted @ 2018-09-27 09:26 029黄甲栋 阅读(1699) 评论(0) 推荐(0)
关于scrapy的一些练习
摘要：练习代码如下： 主函数： setting.py: items.py: start.py: pipelines.py: 阅读全文
posted @ 2018-09-18 19:44 029黄甲栋 阅读(420) 评论(0) 推荐(0)
安装python框架scrapy
摘要：首先，先去https://www.lfd.uci.edu/~gohlke/pythonlibs/#twsited这个网址下载安装twisted的whl文件。 阅读全文
posted @ 2018-09-13 10:38 029黄甲栋 阅读(248) 评论(0) 推荐(0)
ssm中遇到的一些问题及解决办法
摘要：1、问题1： 解决办法：首先，这是因为控制类UserController缺少了一部分代码，这段代码的主要作用是用ApplicationContext 去定位classpath：applicationContext.xml文件，然后获取其中的bean UserService，UserDAO等等。代码如 阅读全文
posted @ 2018-09-11 14:18 029黄甲栋 阅读(935) 评论(0) 推荐(0)
安装PIL和pytesseract，用Pycharm自动化测试，验证码登陆
摘要：1、安装PIL window键+r打开cmd，在cmd输入：pip install PIL 错误提示： Could not find a version that satisfies the requirement PIL (from versions: ) No matching distribu 阅读全文
posted @ 2018-09-04 14:07 029黄甲栋 阅读(2004) 评论(0) 推荐(0)