华安 - 博客园

H5播放m3u8视频

摘要：最近用爬虫爬取视频文件的时候，遇到了m3u8文件，按照正常的直接爬取mp4文件方式来直接爬取，只爬取了一个很小文件 2K左右，我就觉得很奇怪，最后打开了文件看了下：还要将一段段的 ts 文件爬下来才可以正常的用 h5来播放。最后爬取下来了 m3u8文件和对应的 ts文件，这时要用h5播放了，如阅读全文

posted @ 2024-04-12 09:08 华安阅读(2) 评论(0) 推荐(0) 编辑

netCore html导出pdf集中方案

摘要： 1、Select.HtmlToPdf.NetCore（只支持windows）免费，推荐使用这个，使用说明 https://selectpdf.com/docs/Index.htm 2、Aspose.PDF（可以跨平台）免费版本有水印，可以找破解版，使用说明 https://docs.aspose.c 阅读全文

posted @ 2024-04-07 14:32 华安阅读(5) 评论(0) 推荐(0) 编辑

xpath和contains模糊匹配

摘要：来源：https://www.cnblogs.com/kaibindirver/p/12072546.html 最近在弄数据爬取，研究了下xpath,也参考了很多文章，这篇总结不错，就直接复制过来了。常见的用法举例： #它会取class含有有test1和test2的元素 xpath('//div[ 阅读全文

posted @ 2024-03-23 15:46 华安阅读(13) 评论(0) 推荐(0) 编辑

在win10下用pyinstaller打包scrapy项目生成exe文件

摘要：这个玩意的使用方法很简单，但是有很多坑，特别是项目稍微大一点，import引用的很多的时候，那就是打包要人命了，基本不会正常。注意有时候还需要执行 pip install pywin32 之后再进行打包。 1、打包完之后，无法导入模块。譬如：你用 pyinstaller -F entrypoi 阅读全文

posted @ 2024-03-18 09:09 华安阅读(4) 评论(0) 推荐(0) 编辑

python的代码发布到服务器上需要注意的事项

摘要： 1、服务器的python运行环境配置。从官网上 https://www.python.org/ 下载服务器操作系统对应的版本。然后配置 python和 pip命令运行的环境变量，这是windows下的检查是否正常： 2、开发时引用的第三方库要在服务器上安装。 a.首先获取需要的第三方库列表 p 阅读全文

posted @ 2024-03-15 09:09 华安阅读(4) 评论(0) 推荐(0) 编辑

从网上下载一个python项目后如何下载项目需要的第三方库

摘要： 1.首先获取需要的第三方库列表 pip freeze > requirements.txt 导入到文件中。 2、从文件中进行批量安装 pip install -r requirements.txt 阅读全文

posted @ 2024-03-12 16:46 华安阅读(5) 评论(0) 推荐(0) 编辑

python得scrapy提取数据 xpath注意事项

摘要：在提取器过滤数据这个地方被坑了很久，确实有点坑，有点难以理解，多注意下就可以了。 from multiprocessing import allow_connection_pickling from scrapy.spiders import Spider from ..items import C 阅读全文

posted @ 2024-03-12 14:26 华安阅读(7) 评论(0) 推荐(0) 编辑

python得scrapy抓中文，保存csv、json、txt文件乱码解决方法

摘要：保存json和txt文件，出现这种东西不是乱码，是unicode，例如： \u96a8\u6642\u66f4\u65b0> \u25a0\u25a0\u25a 在settings.py文件中加入下面一句code，之后就是中文了。 FEED_EXPORT_ENCODING ='utf-8' 保存cs 阅读全文

posted @ 2024-03-12 10:54 华安阅读(10) 评论(0) 推荐(0) 编辑

visual studio中创建python的爬虫 scrapy项目

摘要： scrapy教程：https://zhuanlan.zhihu.com/p/598764670 xpath教程：https://www.runoob.com/xpath/xpath-syntax.html 1.在命令行中安装 scrapy环境。一定要安装，是为了在指定的目录下创建一个 scrapy的阅读全文

posted @ 2024-03-11 15:53 华安阅读(23) 评论(0) 推荐(0) 编辑

H5页面实现在微信里面转发和分享朋友圈

摘要：最近接到一个部门的需求，用H5开发一些公司宣传的资料，然后在微信里面方便分享。经历过了很多次的踏坑，最后终于实现了，特总结一下： 1.首先申请公众号，并且是认证过了的. 2.在公众号里面进行开发设置。这个很重要，刚开始我没设置对，一堆问题。注意：1、服务器地址(URL) https://域名/We 阅读全文

posted @ 2024-02-06 10:57 华安阅读(207) 评论(0) 推荐(0) 编辑

huaan011