会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
lingwang3
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
3
4
5
6
7
8
9
10
11
下一页
2020年11月3日
数据采集-数据获取
摘要: 1、数据在网页上 2、数据ajax请求,参数可遍历 3、数据ajax请求,参数不可遍历,但有章可循 4、数据ajax请求,参数动态变化 5、数据请求后返回数据加密 6、无法破解,自动化测试 7、文件的下载:图片,MP3,MP4等
阅读全文
posted @ 2020-11-03 09:24 lingwang3
阅读(178)
评论(0)
推荐(0)
2020年10月20日
ffmpeg的安装与使用
摘要: ffmpeg -headers "Referer:https://www.c-span.org/" -i https://m3u8-1.c-spanvideo.org/program/program.554829.234.m3u8 -c copy -bsf:a aac_adtstoasc 123.m
阅读全文
posted @ 2020-10-20 19:51 lingwang3
阅读(311)
评论(0)
推荐(0)
2020年9月14日
pyspark处理hadoop上资源
摘要: 1.pyspark处理存在hadoop上的seq文件 # coding=utf-8 from py4j.compat import long from pyspark import SparkConf, SparkContext if __name__ == "__main__": sc = Spa
阅读全文
posted @ 2020-09-14 15:33 lingwang3
阅读(243)
评论(0)
推荐(0)
2020年8月31日
ubuntu系统重装后环境配置
摘要: 1.更换公司自带数据源为阿里云 vi /etc/apt/sources.list deb-src http://archive.ubuntu.com/ubuntu xenial main restricted #Added by software-properties deb http://mirr
阅读全文
posted @ 2020-08-31 15:02 lingwang3
阅读(170)
评论(0)
推荐(0)
2020年6月24日
requests-html的安装与使用
摘要: 使用requests-html单一库完成简书首页获取(包含请求、解析、JavaScript渲染功能) 一:安装 sudo pip install requests-html # -*- coding: utf-8 -*- import requests_html text_url = 'https:
阅读全文
posted @ 2020-06-24 17:10 lingwang3
阅读(3918)
评论(0)
推荐(0)
2019年7月25日
python3写的exe小工具的准备事项
摘要: 1.环境 windows7、python3 2.编辑器 pycharm 3.python3环境下安装 pip3、PyQt5、pyinstaller pip3 install PyQt5,也可以先下载下来PyQt5.whl,用pip3 install xxx.whl pip3 install pyin
阅读全文
posted @ 2019-07-25 15:19 lingwang3
阅读(721)
评论(0)
推荐(0)
2019年6月26日
信息网站罗列
摘要: 1.空气质量排行榜 2.天气预报 3.院校信息库 4.热门新闻-新浪网 5.IT桔子 | 泛互联网创业投资项目信息数据库及商业信息服务提供商
阅读全文
posted @ 2019-06-26 14:39 lingwang3
阅读(201)
评论(0)
推荐(0)
2019年5月30日
you-get下载视频
摘要: 1.https://github.com/soimort/you-get 2.windows和ubuntu上需要有python3 3.安装pip3 执行sudo apt-get install python3-pip 【注意apt-get的镜像,一般阿里云的镜像可以下载】 4.安装you-get 执
阅读全文
posted @ 2019-05-30 16:33 lingwang3
阅读(406)
评论(0)
推荐(0)
2019年5月22日
sprintboot入门
摘要: 1.我的idea上新建没有Spring Initializr,所以我先在官网上生成一个。 Maven 构建项目 1、访问 http://start.spring.io/ 2、选择构建工具 Maven Project、Java、Spring Boot 版本 2.1.3 以及一些工程基本信息,可参考下图
阅读全文
posted @ 2019-05-22 17:01 lingwang3
阅读(488)
评论(0)
推荐(0)
2019年4月22日
linux 常用指令nfs,根据时间删除文件,路由router
摘要: linux里发现文件为120天前建立的并删除 find -mtime +120 -type f -name *.csv -exec rm -rf {} \; linux里发现空文件夹并删除 find -type d -empty -exec rm -rf {} \; linux里发现txt文件有多少
阅读全文
posted @ 2019-04-22 15:06 lingwang3
阅读(316)
评论(0)
推荐(0)
上一页
1
···
3
4
5
6
7
8
9
10
11
下一页
公告