01 2020 档案

爬虫--数据存储 小问题总结
摘要:with open(path,'w',newline=''): #解决 当写入csv文件时出现空行 的问题 ... json.dumps(obj,ensure_ascii='False') #使写入的中文字符能正常读出 阅读全文

posted @ 2020-01-28 19:45 ifran 阅读(208) 评论(0) 推荐(0)

json转化为csv文件打开时,中文乱码
摘要:三种方法: 法一 用笔记本打开csv文件,在笔记本中选择“文件”-->“另存为”。设置编码类型为‘utf-8' 法二 在打开的excel页面中,选择“文件”菜单-->选项-->语言设置为简体中文 法三 1.数据-->从文本 2.依此设置。文件格式设置为 “无(常规)” 附json->csv代码: i 阅读全文

posted @ 2020-01-28 19:37 ifran 阅读(1766) 评论(0) 推荐(0)

爬虫出现乱码的一个特例
摘要:爬取猫眼电影排行,无法正常显示中文,出现乱码 response.text响应总是乱码 找了许多种方法,python爬虫解决gbk乱码问题、python爬虫的中文乱码问题? - 知乎 发现,在爬取百度[https://www.baidu.com/]时出现乱码,通过编码->解码, import requ 阅读全文

posted @ 2020-01-26 18:45 ifran 阅读(530) 评论(0) 推荐(0)

fake_useragent库—随机生成请求头
摘要:ua=UserAgent() 对象 实例化 ua.chrome 生成谷歌浏览器的对象 ua.firefox import requests from fake_useragent import UserAgent url='https://maoyan.com/board/4?offset=0' u 阅读全文

posted @ 2020-01-22 22:08 ifran 阅读(348) 评论(0) 推荐(0)

导航