团对-爬取豆瓣电影top250-开发环境搭建过程

瓣top250爬取环境搭建

• 安装虚拟机
• 装Ubantu

• psypider 框架安装

  • pip安装 python get-pip.py

  • phantomjs 安装

  • wgethttps://bitbucket.org/ariya/phantomjs/downloads/phantomjs-2.1.1-linux-x86_64.tar.bz2 yum install phantomjs
  • pyspider 安装 pip install pyspider
  • 测试 pyspider all
  • 然后浏览器访问 http://localhost:5000