随笔分类 -  python

使用cv2读取网络图片
摘要：在使用cv2加载图片时，发现使用imread方法加载本地图片没有问题，但加载网络图片就无法读取None，显示为None，因此读取不到服务器上存储的图片， 解决方法： 先使用PIL读取网络图片，再将PIL.Image转换成OpenCV格式 response = requests.get(img_pat 阅读全文
posted @ 2022-08-08 00:18 Arisf 阅读(772) 评论(0) 推荐(1)
python将csv文件导入neo4j数据库中
摘要：其实就是按行解析csv文件，并将其中数据分为“结点”、“关系”两种类型，构建利用Node()方法构建节点；Relationship()方法构建关系 csv结构 entity1,relation1,entity2,relation2,info,relation3,keyword 人格纠纷权,包含,一般 阅读全文
posted @ 2022-06-11 20:17 Arisf 阅读(774) 评论(0) 推荐(0)
python爬取京东商品评论
摘要：可爬取的内容 上代码 import requests import json import csv from lxml import etree from bs4 import BeautifulSoup import time ''' #如果ip被封，可以使用这个进行ip设置 proxy ='11 阅读全文
posted @ 2022-03-13 17:18 Arisf 阅读(598) 评论(0) 推荐(0)
yolo报错'gbk' codec can't decode byte 0xad in position 402: illegal multibyte sequence
摘要：修改yaml文件时添加了中文注释，删除即可 阅读全文
posted @ 2022-02-22 19:05 Arisf 阅读(57) 评论(0) 推荐(0)
观影大数据分析（下）
摘要：What 电影类型数量 从数量上看， 排名前三的电影类型分别为Drama（戏剧）、Comedy（喜剧）、Thriller（恐怖），分别占比16.2%，12.7%和11.4%，但实际上除了数量排名第一的戏剧外，第二名Comedy（喜剧），第三名Thriller（恐怖），第四名Action（动作）差距并 阅读全文
posted @ 2021-12-10 16:54 Arisf 阅读(618) 评论(0) 推荐(1)
观影大数据分析（中）
摘要：6.Json数据转换 **说明：**genres,keywords,production_companies,production_countries,cast,crew 这 6 列都是 json 数据，需要处理为列表进行分析。 处理方法： json 本身为字符串类型，先转换为字典列表，再将字典列表 阅读全文
posted @ 2021-12-10 01:10 Arisf 阅读(756) 评论(0) 推荐(0)
观影大数据分析（上）
摘要：王 S 聪想要在海外开拓万 D 电影的市场，这次他在考虑：怎么拍商业电影才 能赚钱？毕竟一些制作成本超过 1 亿美元的大型电影也会失败。这个问题对电影 业来说比以往任何时候都更加重要。 所以，他就请来了你（数据分析师）来帮 他解决问题，给出一些建议，根据数据分析一下商业电影的成功是否存在统一公 式？ 阅读全文
posted @ 2021-12-10 00:55 Arisf 阅读(1092) 评论(4) 推荐(0)
解决pandas读写文件乱码
摘要：使用pandas读csv文件，由于文件中存在日文字符导致某行产生了乱码 解决，添加encoding="utf_8_sig" total.to_csv("C://Users/wuhao/Desktop/筛选2.csv",encoding="utf_8_sig",index=False) 参考： pan 阅读全文
posted @ 2021-12-09 14:11 Arisf 阅读(388) 评论(0) 推荐(0)
python爬取疫情数据存入MySQL数据库
摘要：import requests from bs4 import BeautifulSoup import json import time from pymysql import * def mes(): url = 'https://ncov.dxy.cn/ncovh5/view/pneumoni 阅读全文
posted @ 2021-06-21 00:15 Arisf 阅读(211) 评论(0) 推荐(0)
CVPR顶会论文爬取存入MySQL数据库（标题、摘要、作者、PDF链接和原地址)
摘要：main.py import pymysql import re import requests # 连接数据库函数 from bs4 import BeautifulSoup def insertCvpr(value): try: db = pymysql.connect(host="localh 阅读全文
posted @ 2021-06-12 14:14 Arisf 阅读(199) 评论(0) 推荐(0)
每日总结
摘要：pymysql连接报错： _init__() takes 1 positional argument but 5 positional arguments (and 1 keyword-only argument) were given 解决方法： 连接方法加属性名称，例 pymysql.conne 阅读全文
posted @ 2021-06-11 23:38 Arisf 阅读(46) 评论(0) 推荐(0)