开启爬虫

以前本人还在互联网公司工作的时候,公司搞个爬虫还得关个小黑屋,然后历时好几个月。

 

现在我们搞两个小网站,大多数功能,界面和功能都很简陋,但是不影响使用,不知道和其他团队比比,水平咋样,毕竟我自己没有在技术团队工作过。

 

By all means,我们认为目前小网站,至少在技术上,解决了服务的提供问题。

 

我们针对很多房东诟病,都是理解的。但是,我们的服务就是这么干。

 

用 Python  BeautifulSoup 爬虫

 

主要是搜集点数据,用于数据分析。

 

大概 2019 年的时候,下载了一篇代码试了试。简言之,就是 requests + BeautifulSoup 方案。

 

1. 关于 requests 

 

参考
https://docs.python-requests.org/en/latest/index.html

https://www.w3schools.cn/python/module_requests.asp

 

2024 年 3月 14日

晚上 9:37 分 

完成任务。

posted on 2024-03-14 17:47  Mira_2019  阅读(3)  评论(0编辑  收藏  举报