上一页 1 2 3 4 5 6 ··· 17 下一页
摘要: url = "https://aod.cos.tx.xmcdn.com/group28/M07/DE/F4/wKgJXFk8TBnQZJbDAGkx6deAu2c402-aacv2-48K.m4a" import requests response = requests.get(url) conte 阅读全文
posted @ 2024-01-24 22:32 傲世小苦瓜 阅读(14) 评论(0) 推荐(0)
摘要: 今天尝试使用hutool对自己的oss进行下载。 <dependency> <groupId>cn.hutool</groupId> <artifactId>hutool-all</artifactId> <version>5.8.11</version> </dependency> package 阅读全文
posted @ 2024-01-24 22:17 傲世小苦瓜 阅读(11) 评论(0) 推荐(0)
摘要: from pyspark import SparkConf, SparkContext # 创建Spark配置和上下文对象 conf = SparkConf().setAppName("SparkActionsAndPartitions") sc = SparkContext(conf=conf) 阅读全文
posted @ 2024-01-23 22:23 傲世小苦瓜 阅读(12) 评论(0) 推荐(0)
摘要: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 阅读全文
posted @ 2024-01-22 22:23 傲世小苦瓜 阅读(16) 评论(0) 推荐(0)
摘要: Standalone 架构 Standalone模式是Spark自带的一种集群模式,不同于前面本地模式启动多个进程来模拟集群的环境,Standalone模 式是真实地在多个机器之间搭建Spark集群的环境,完全可以利用该模式搭建多机器集群,用于实际的大数据处理。 StandAlone 是完整的Spa 阅读全文
posted @ 2024-01-21 23:54 傲世小苦瓜 阅读(22) 评论(0) 推荐(0)
摘要: from pyspark.sql import SparkSession from pyspark.ml.recommendation import ALS # 创建SparkSession spark = SparkSession.builder.appName('RecommendationSy 阅读全文
posted @ 2024-01-20 21:44 傲世小苦瓜 阅读(19) 评论(0) 推荐(0)
摘要: Selenium 是一个强大的自动化测试工具,用于模拟真实用户在Web浏览器中的交互行为。它可以跨多种浏览器和平台运行,并且支持多种编程语言,包括Python、Java、C# 和 Ruby 等。以下是一个基本的Selenium使用教程概述: 1. 准备工作 安装浏览器:首先确保安装了要进行自动化操作 阅读全文
posted @ 2024-01-19 12:13 傲世小苦瓜 阅读(10) 评论(0) 推荐(0)
摘要: XPATH语法: 1.路径查询 //:查找所有子孙节点,不考虑层级关系 / :找直接子节点 2.谓词查询 //div[@id] //div[@id="maincontent"] 3.属性查询 //@class 4.模糊查询 //div[contains(@id, "he")] //div[start 阅读全文
posted @ 2024-01-18 23:06 傲世小苦瓜 阅读(14) 评论(0) 推荐(0)
摘要: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 import json import jsonpath 阅读全文
posted @ 2024-01-18 22:54 傲世小苦瓜 阅读(54) 评论(0) 推荐(0)
摘要: 今天学习了爬虫 # 导入所需库 import urllib.request from lxml import etree # 设置目标URL和请求头信息,模拟Chrome浏览器访问 url = 'https://www.baidu.com/' headers = { 'User-Agent': 'M 阅读全文
posted @ 2024-01-16 22:49 傲世小苦瓜 阅读(22) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 ··· 17 下一页