[置顶] 米扑科技的开源项目：sitemap-php 自动生成网站地图
摘要： sitemap-php 是一个轻量级、简单快速生成网站地图的开源项目，由北京米扑科技有限公司(mimvp.com)开发分享。 通过简单的配置定义，一个函数createSitemap()，可自动生成sitemap.xml、sitemap.html等网站地图文件, 自动生成的xml、html文件，支持Google、Bing、Baidu等主流搜索引擎收录。 阅读全文
posted @ 2017-07-16 14:14 mimvp 阅读(668) 评论(1) 推荐(0)
2017年8月16日
Python requests 安装与开发
摘要： Requests 是用Python语言编写HTTP客户端库，跟urllib、urllib2类似，基于 urllib，但比 urllib 更加方便，可以节约我们大量的工作，完全满足 HTTP 测试需求，编写爬虫和测试服务器响应数据时经常会用到。 Requests 的哲学是以 PEP 20 的习语为中心 阅读全文
posted @ 2017-08-16 11:14 mimvp 阅读(327) 评论(0) 推荐(0)
2017年8月15日
Python pyspider 安装与开发
摘要： PySpider 简介 PySpider是一个国人编写的强大的网络爬虫系统并带有强大的WebUI。采用Python语言编写，分布式架构，支持多种数据库后端，强大的WebUI支持脚本编辑器、任务监视器，项目管理器以及结果查看器。 PySpider 来源于以前做的一个垂直搜索引擎使用的爬虫后端。我们需要 阅读全文
posted @ 2017-08-15 23:35 mimvp 阅读(710) 评论(0) 推荐(0)
2017年8月10日
Shell curl 和 wget 使用代理IP
摘要： Linux Shell 提供两个非常实用的命令来爬取网页，它们分别是 curl 和 wget curl 和 wget 使用代理 curl 支持 http、https、socks4、socks5 wget 支持 http、https 代理示例： 1 2 3 4 5 6 7 8 9 10 11 12 1 阅读全文
posted @ 2017-08-10 21:46 mimvp 阅读(320) 评论(0) 推荐(0)
2017年8月8日
米扑代理示例（mimvp-proxy-demo）
摘要： 米扑代理示例（mimvp-proxy-demo） 米扑代理示例（mimvp-proxy-demo）聚合了多种编程语言使用代理IP，由北京米扑科技有限公司(mimvp.com)原创分享。 米扑代理示例，包含Python、Java、PHP、C#、Go、Perl、Ruby、Shell、NodeJS、Pha 阅读全文
posted @ 2017-08-08 21:21 mimvp 阅读(824) 评论(0) 推荐(0)