会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
WY_记录
博客园
首页
新随笔
联系
订阅
管理
2018年8月2日
将博客搬至CSDN
摘要: 博客搬家
阅读全文
posted @ 2018-08-02 13:59 WY~记录
阅读(115)
评论(0)
推荐(0)
2018年8月1日
爬取淘宝商品信息selenium+pyquery+mongodb
摘要: 跳转到传入页面,获得源码,调用商品解析函数 存储函数,将商品信息存入数据库
阅读全文
posted @ 2018-08-01 14:37 WY~记录
阅读(290)
评论(0)
推荐(0)
2018年7月30日
selenium库
摘要: [TOC] selenium "安装,配置及连接" selenium 官方网站: GitHub: PyPI: 官方文档: 中文文档: 安装: selenium需要配合浏览器及其驱动配合 ChromeDriver 官方网站:(墙) 下载地址: 下载地址2: 版本映射表: 浏览器中查看Chrome版本(
阅读全文
posted @ 2018-07-30 15:51 WY~记录
阅读(261)
评论(0)
推荐(0)
2018年7月29日
requests库+ajax数据分析+多线程爬取头条图集
摘要: ``` ''' 根据关键字获取今日头条图集 ''' import os import requests from urllib.parse import quote from hashlib import md5 from multiprocessing.pool import Pool baseurl = 'https://www.toutiao.com/search_content/?'...
阅读全文
posted @ 2018-07-29 09:12 WY~记录
阅读(508)
评论(0)
推荐(0)
2018年7月28日
requests微博爬取Ajax数据+mongoDB存储
摘要: ``` import requests from pyquery import PyQuery as pq from pymongo import MongoClient headers = { 'Referer': 'https://m.weibo.cn/u/2830678474', 'User-Agent': 'Mozilla/5.0 (X11; Linux x86_64) ...
阅读全文
posted @ 2018-07-28 15:04 WY~记录
阅读(478)
评论(0)
推荐(0)
redis存储
摘要: [TOC] redis存储 安装,链接与配置 "edis" 官方网站: 官方文档: 中文官网: GitHub: 中文教程: Redis Desktop Manager:可视化管理工具,来管理Redis Redis Desktop Manager GitHub: 安装: 进入命令行模式: 修改配置文件
阅读全文
posted @ 2018-07-28 08:58 WY~记录
阅读(496)
评论(0)
推荐(0)
2018年7月26日
pymongo操作MongoDB
摘要: [TOC] pymongo操作MongoDB 安装,启动及链接 MongoDB "返回目录" + 官方网站: + 官方文档: + GitHub: + 中文教程: + 16.04安装: + 导入MongoDB的GPG key: + 创建apt get源列表: + 更新apt get源: + 安装Mon
阅读全文
posted @ 2018-07-26 15:04 WY~记录
阅读(685)
评论(0)
推荐(0)
用pymongo连接mongodb,操作时报错:pymongo.errors.OperationFailure: not authorized on test to execute command
摘要: 创建连接对象时,用client = pymongo.MongoClient('mongodb://user:password@localhost:27017/')这样的方式,增加权限认证
阅读全文
posted @ 2018-07-26 12:50 WY~记录
阅读(5346)
评论(0)
推荐(0)
2018年7月25日
Ubuntu16.04下安装mongodb运行失败解决
摘要: 原答案:
阅读全文
posted @ 2018-07-25 19:44 WY~记录
阅读(403)
评论(0)
推荐(0)
pymysql操作mysql
摘要: [TOC] pymysql操作mysql 安装,启动及链接 "返回目标" MySQL + 官方网站: + 下载地址: + 中文教程: + 安装mysql: + 启动、关闭和重启MySQL服务: sudo service mysql start sudo service mysql stop sudo
阅读全文
posted @ 2018-07-25 16:47 WY~记录
阅读(1368)
评论(0)
推荐(0)
下一页
公告