03 2019 档案

安装java 和 eclipse
摘要：昨天安装eclipse出现个问题, 安装完了创建第一个项目目录的时候弹窗报错an ......什么什么， 百度一堆没有用，后来发现是jdk12不支持，换了jdk8就可以了， 然后eclipse安装pydev插件， 在eclipse界面help Eclipse Marketplace， 在find框里 阅读全文

posted @ 2019-03-26 20:50 骑白马的Coder 阅读(79) 评论(0) 推荐(0)

nginx配置
摘要：Nginx简介 web 反向代理 缓存 优点： 简单稳定 模块 rewrite Nginx部署 安装： apt get install y build essential libssl dev libtool libpcre3 libpcre3 dev make openssl zlib1g dev 阅读全文

posted @ 2019-03-17 21:45 骑白马的Coder 阅读(108) 评论(0) 推荐(0)

爬取饿了么区域商家分布
摘要：这个简单，就是熟悉下数据格式保存，反反爬， https://mainsite restapi.ele.me/v2/pois? extras%5B%5D=count&geohash=wx4g0bmjetr7&keyword=%E6%9C%9D%E9%98%B3&limit=20&type=nearby 阅读全文

posted @ 2019-03-13 00:03 骑白马的Coder 阅读(873) 评论(1) 推荐(0)

爬取起点小说信息
摘要：没有vip所以并没爬取小说内容，这里主要是解决起点小说字数的反反爬 import random import requests import re import csv from fontTools.ttLib import TTFont from io import BytesIO from py 阅读全文

posted @ 2019-03-12 23:58 骑白马的Coder 阅读(306) 评论(0) 推荐(0)

爬取链家所有地区最新房源信息
摘要：使用scrapy，拼接url,找到翻页参数，保存为json 若要实现真正的全部数据爬取，需要将筛选参数组合，这次做的只到默认100页 lj.py ============================================== coding: utf 8 import copy impo 阅读全文

posted @ 2019-03-12 23:53 骑白马的Coder 阅读(435) 评论(0) 推荐(0)

导航