12 2017 档案

【day01】【环境】JAVA开发环境搭建
摘要：1. 安装ubuntu 17.10虚拟机 2. 安装JDK jdk最新版：http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 这里我安装的是jdk1.8.0_151 su 输入root 阅读全文
posted @ 2017-12-18 10:09 copywang 阅读(231) 评论(0) 推荐(0)
爬虫学习阶段性总结
摘要：爬虫学习阶段性总结 爬虫的基础知识我打算就先学到这里了，以后需要用起来的时候再去看看相关文档和谷歌，做一个小量级的爬虫程序问题不大，对于分布式的和增量更新去重等需求就直接上框架，用别人的轮子还是蛮爽的。 简单小量级：requests+pyquery JS渲染太多的：selenium+Phantomj 阅读全文
posted @ 2017-12-11 11:16 copywang 阅读(828) 评论(0) 推荐(0)
【爬虫】【原创】08 使用简单正则表达式爬取下厨房（早餐，午餐，晚餐）
摘要：<!--[endif]-->目的 网址： http://www.xiachufang.com/ 输入关键词“早餐”，发现是跳转链接（暂时没想到这种怎么处理比较好，就单独拿出来处理吧） <!--[endif]--> 午餐和晚餐的网址就比较一致 <!--[endif]--> <!--[endif]--> 阅读全文
posted @ 2017-12-10 18:40 copywang 阅读(565) 评论(0) 推荐(0)
Ubuntu16.04安装Pycharm2017.2
摘要：第1步，pycharm 2017.2下载地址：PyCharm: Python IDE for Professional Developers by JetBrains 选择linux版本的Professional版本 下载完成后默认目录是/home/用户名/Downloads/ 第2步，安装JDK8 阅读全文
posted @ 2017-12-06 15:48 copywang 阅读(3632) 评论(0) 推荐(0)
【问题】pyspider安装过程的一些问题
摘要：第一个问题： 环境信息为windows10 64位，原生python3.6环境，没有使用anaconda，使用pip install pyspider报egg错误 解决方法： 1. 安装wheel pip install wheel 2. 下载pycurl 地址在这里：https://www.lfd 阅读全文
posted @ 2017-12-06 10:02 copywang 阅读(235) 评论(0) 推荐(0)
随便记录
摘要：conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/ conda config --set show_channel_urls yes http://blog.csdn.net/qq_ 阅读全文
posted @ 2017-12-03 15:54 copywang 阅读(122) 评论(0) 推荐(0)