以“有匪”为实战案例，用python爬取视频弹幕

最近腾讯独播热剧“有匪”特别火，我也一直在追剧，每次看剧的时候都是把弹幕开启的，这样子看剧才有灵魂呀。借助手中的技术，想爬取弹幕分析下这部电视剧的具体情况和网友们的评论！对于弹幕的采集需要以下一些步骤

1、查找数据包

2、分析弹幕连接

3、解码二进制数据包

4、提取数据

5、保存数据

我们先来分析下提取的数据

#! -*- encoding:utf-8 -*-  

  import requests

  import random    

# 要访问的目标页面  

targetUrl = "http://httpbin.org/ip"  

 # 要访问的目标HTTPS页面  

# targetUrl = "https://httpbin.org/ip"  

  # 代理服务器(产品官网 www.16yun.cn)

  proxyHost = "t.16yun.cn"  

 proxyPort = "31111"  

  # 代理验证信息

  proxyUser = "username"  

 proxyPass = "password"  

 proxyMeta = "http://%(user)s:%(pass)s@%(host)s:%(port)s" % {    

  "host" : proxyHost,      

 "port" : proxyPort,    

   "user" : proxyUser,        

"pass" : proxyPass,    }    

# 设置 http和https访问都是用HTTP代理  

 proxies = {      

 "http"  : proxyMeta,        

"https" : proxyMeta,    }  

  #  设置IP切换头  

tunnel = random.randint(1,10000)  

 headers = {"Proxy-Tunnel": str(tunnel)}  

  resp = requests.get(targetUrl, proxies=proxies, headers=headers)  

  print resp.status_code

  print resp.text