、一叶孤城

摘要： 本文仅用于学习和交流，不具有任何商业价值，如有问题，请与我联系，我会即时处理。--Python逐梦人。 网址分析 通过分析，没有json，只能用html解析获取数据，抓几个页面看看规律。因为要爬八大菜系，所以有横向和纵向比较。 横向： https://www.douguo.com/caipu/%E7 阅读全文

摘要： 心血来潮，想看下腾讯招聘岗都有些啥要求，都需要会啥，都需要做啥。腾讯招聘传送门。 本文仅用于学习与交流使用，不具有任何商业价值，如有问题，请与我联系，我将即时处理。--Python逐梦者。 数据爬取与处理 输入要查询的岗位，比如Python。如下图： 抱着试一试的态度吧，打开开发者工具，看有没有数据 阅读全文

摘要： Pandas是这么强大的东西，不能一直看，看有印象，写才有手感。保持手感。 Python逐梦者。 1，使用列表创建Series： 1 import pandas as pd 2 3 alist = [1.5, 2.5, 3, 4.5, 5.0, 6] 4 data = pd.Series(alist 阅读全文

摘要： 首先找到自己心仪的棉袄，然后开发者工具手机数据。最主要是找到数据接口的参数变化。通过开发者工具发现， 上代码： 1 """ 2 今天来薅羊毛衣 3 """ 4 import pprint 5 import requests 6 import csv 7 import time 8 import ra 阅读全文

摘要： 本文仅用于学习与交流使用，不具有任何商业价值，如有问题，请与我联系，我会即时处理。 Python逐梦者。 首先是某果TV。 弹幕。以电影《悬崖之上》为例。弹幕数据所在的文件是动态加载的，打开开发者工具，让它加载很多数据，然后搜索某一条数据就看到在哪个包里了，然后就是参数变化不同分析。某果TV的视频播 阅读全文

摘要： 能打能扛有颜值，爬一波对奥运健儿的评论。 """ 爬一下B站“杀疯了，这就是国家队的美貌吗？”，视频地址： https://www.xx.com/video/BV1uU4y1H7wL?from=search&seid=14179860062243648577&spm_id_from=333.337. 阅读全文

摘要： 微博热搜第一名；B站人气超过3.5亿，满屏弹幕；腾讯视频超过600万人观看；央视新闻也发微博祝贺EDG；今天用python来爬下B站“我们是冠军”这个视频的评论并做些可视化。获取呐喊的正确姿势。 评论爬取代码： 1 import csv 2 import pprint 3 import random 阅读全文

摘要： 协程是啥 简单来说，协程是一种基于线程之上，但又比线程更加轻量级的存在。对于系统内核来说，协程具有不可见的特性，所以这种由 程序员自己写程序来管理 的轻量级线程又常被称作 "用户空间线程"。 协程比多线程好在哪 1. 线程的控制权在操作系统手中，而 协程的控制权完全掌握在用户自己手中，因此利用协程可 阅读全文

摘要： 冬天来了，想着爬下某团的烤肉，代码如下： 1 """ 2 爬取某团 3 """ 4 import csv 5 import random 6 7 import requests 8 import pprint 9 import os 10 import time 11 12 keyword = in 阅读全文

摘要： 连央视都祝贺EDG夺冠，作为码农的我们，怎么能闲着，就来爬爬B站的弹幕，看看人都说了什么。刚开始有这个想法的时候呢，B站的视频cid地址还保存在json中，今天来写的时候，发现已经没有了，截图如下： 本来请求视频播放页面后，会有一个playlist的包，包里的json数据呢，就是图中圈圈的位置，id 阅读全文