yalier

摘要： 删除VOC数据中没打标签的图片 py脚本功能：删除VOC数据中的JPEGImages文件中的没打标签的文件。 代码如下： import os path1 = r"F:\alldate\SHONG\Annotations" #对比的文件夹（标签文件夹） path2 = r"F:\alldate\SHO 阅读全文

摘要： 使用gluoncv.model_zoo进行目标检测 ​ 本文章使用gluoncv.model_zoo中已经训练好的模型进行目标检测，这里使用的是YOLO3 darknet训练voc数据集的模型。 加载模型 这里讲加载模型到本地，模型默认下载到当前用户下的文件夹.mxnet\models\ from 阅读全文

摘要： xml.etree ElementTree介绍 ET简介 ET有重要的两个类，一个是ElementTree，另一个是Element. ET使用 假设有xml文件内容如下： <?xml version="1.0"?> <data> <country name="Liechtenstein"> <ran 阅读全文

摘要： xpath学习 parsel包 该包主要用来将请求后的字符串格式解析成re,xpath,css进行内容的匹配，主要是对XML和HTML等进行分析。 xpath语法 / #根节点或节点间的过渡 // #跨越节点获取节点 . #选取当前节点 .. #当前节点的父节点 @ #选取属性 text() #选取 阅读全文

摘要： 在pycharm创建scrapy项目 步骤很简单，直接进入主题。 第一步： 创建一个python项目。解析器什么的自己选择，环境目录默认就好。 第二步： 下载scrapy，步骤file->settings->project Interpreter 然后下载scrapy,下载前建议更改或添加下载源，否 阅读全文

摘要： 利用360搜图爬取图片 ​ 最近闲得无聊，搞了个基于360搜图的图片爬取。用得都是比较基础的知识，所以这里也分享一下代码。本人也不是什么大佬。代码看看就行。**完整的代码在文章最后面。**下面我就简单介绍一下我爬取的过程。 1.第一步 首先我们要知道360关键字是用什么键来对应的，我记得360是q对 阅读全文

摘要： 更改request的编码 request乱码问题 因为Tomcat7对request默认使用的ISO编码进行解析，而我们实际开发中往往使用UTF-8，所以在对request中的信息进行处理时，因为编码方式的不同，所以导致通过request获取的信息出现乱码现象。(浏览器使用UTF-8方式的请求，而T 阅读全文

摘要： PYTHON模块搜索路径 获取python模块的搜索路径 import sys for path in sys.path: print(path) #打印模块搜索路径 python模块的搜索路径能决定你在python中是否能够找到对应的模块并进行导入，如果搜索路径中没有对应模块目录的路径，是无法进行 阅读全文

摘要： Hadoop学习（source方式安装篇） 1.为什么要进行源码编译 网上说Hadoop官网没有提供32位的编译好的Hadoop，这其实是假的，自从2.5版本以后，官方已经提供了64位的编译好的Hadoop，你可以到lib/native目录下通过命令： $file libhadoop.so.1.0. 阅读全文

摘要： crontab快速上手 crontab在类unix系统（Linux也能用）中用于设置周期性被执行的指令。crontab储存的指令被守护进程激活， crond常常在后台运行，每一分钟检查是否有预定的任务需要执行，此任务被称为cron jobs。 1.crontab的作用 通过crontab我们可以定时 阅读全文