aynami - 博客园

钛媒体python爬虫

摘要：钛媒体是一家专注于科技领域的媒体机构，每天都会发布大量的科技新闻和资讯。通过爬取钛媒体的快报，您可以了解到最新的科技动态和趋势，为自己的学习和工作提供参考和帮助。在本次教学中，我将为大家讲解如何使用Python的爬虫框架Scrapy来编写一个可以自动爬取钛媒体快讯的爬虫，并将获取到的数据保存在本地文阅读全文

posted @ 2023-06-15 18:29 aynami 阅读(67) 评论(0) 推荐(0)

python爬取36氪新闻

摘要： 36氪是一家财经与科技新媒体。主要内容包括创业资讯、公司报道、投融资信息、行业分析、人物专访等。其报道涵盖了互联网、人工智能、物联网、区块链、生物技术等多个领域。如果每天都要打开网页，再一条条翻看新闻是一件十分繁琐的事，如果能一次性把新闻信息存到excel里，等需要时再细看某条新闻就好了。我们准阅读全文

posted @ 2023-06-08 15:47 aynami 阅读(601) 评论(0) 推荐(0)

淘宝母婴购物数据可视化分析

摘要：数据来源于阿里天池：淘宝母婴购物数据可视化分析_学习赛_赛题与数据_天池大赛-阿里云天池 (aliyun.com) Ali_Mum_Baby数据集包含脱敏后抽样淘宝母婴购物数据，由淘宝网提供。本次可视化分析的目的是对用户行为数据进行分析，使用Python、Numpy、Pandas和Matplot 阅读全文

posted @ 2023-06-07 10:00 aynami 阅读(665) 评论(0) 推荐(0)

在B站爬取坤坤的视频，并获取视频基本信息

摘要：在B站有许多坤坤的视频，作为一名ikun，让我们写个爬虫研究一下视频的视频的名字、链接、观看次数、弹幕、发布时间以及作者。我们用selenium来实现这个爬虫，由于要获取的数据比较多，我们写几个函数来实现这个爬虫。先倒入需要用到的库，包括selenium, time ,BeautifulSoup 阅读全文

posted @ 2023-06-05 17:48 aynami 阅读(204) 评论(0) 推荐(0)

2023年5月，记录一下WIN10安装proxypool过程中遇到的一些坑

摘要：这两天要学习python爬虫中的代理池，因此要配置proxypool，过程可以说是一波三折。虽然网上也有很多相关教程，不过一些文章也是比较老了，笔者在配置中也碰上了一些新问题，这里笔者也是分享一下本人解决问题的过程。 redis设置首先，我们需要下载一下Redis：下载地址：github.com 阅读全文

posted @ 2023-05-28 20:44 aynami 阅读(162) 评论(0) 推荐(0)

摆脱设备限制，用AutoDL平台玩Stable Diffusion

摘要：

Stable diffusion 是一个非常强大的开源AI绘画软件，自发布以来，便受到了用户的欢迎。不过，作为一款深度学习模型，Stable diffusion对设备的性能有一定的要求。像笔者的 GTX 1650 就跑得很勉强，于是只能找平台搭远程玩了。这里记录一下笔者使用AutoDL玩Stable 阅读全文

posted @ 2023-05-26 14:30 aynami 阅读(685) 评论(0) 推荐(0)

导航

2023年6月15日

2023年6月8日

2023年6月7日

2023年6月5日

2023年5月28日

2023年5月26日