python3爬虫工作的一些个人总结

闲着没事，我也写一下我自己用到的一些最简单的爬虫所需的技术和工具，以后可能就不想写爬虫了，毕竟爬虫深似海！哎?，也为自己做一个笔记，如果能帮到部分爬虫新手的话就更好了
下图是我在看到的一幅图片，说出了我的心声，献给入爬虫坑的新手们。

而且现在基本都是抓取APP数据，说简单也简单，说难是真TMD难！！
简单:
app的数据比web端数据更容易抓取，基本都是http、https协议，返回的数据格式也相对规整,
大多是json格式
困难:
1.需要反编译的知识,需要分析加密算法
2.需要脱壳+反编译
3.需要破解各式各类的签名，证书.
所以一个爬虫工程师慢慢就需要掌握以下技能:
java编程基础
android编程基础
app逆向
app脱壳
破解加密
....
从入门到全栈?
最最最重要的！！！
爬虫岗位一般都是公司边缘化岗位，而且岗位也不多，所以工资什么的，明白了吧，能不转爬虫就别转爬虫吧。