xiao-hong111

摘要： url = "https://aod.cos.tx.xmcdn.com/group28/M07/DE/F4/wKgJXFk8TBnQZJbDAGkx6deAu2c402-aacv2-48K.m4a" import requests response = requests.get(url) conte 阅读全文

摘要： 今天尝试使用hutool对自己的oss进行下载。 <dependency> <groupId>cn.hutool</groupId> <artifactId>hutool-all</artifactId> <version>5.8.11</version> </dependency> package 阅读全文

摘要： from pyspark import SparkConf, SparkContext # 创建Spark配置和上下文对象 conf = SparkConf().setAppName("SparkActionsAndPartitions") sc = SparkContext(conf=conf) 阅读全文

摘要： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 阅读全文

摘要： Standalone 架构 Standalone模式是Spark自带的一种集群模式，不同于前面本地模式启动多个进程来模拟集群的环境，Standalone模 式是真实地在多个机器之间搭建Spark集群的环境，完全可以利用该模式搭建多机器集群，用于实际的大数据处理。 StandAlone 是完整的Spa 阅读全文

摘要： from pyspark.sql import SparkSession from pyspark.ml.recommendation import ALS # 创建SparkSession spark = SparkSession.builder.appName('RecommendationSy 阅读全文

摘要： Selenium 是一个强大的自动化测试工具，用于模拟真实用户在Web浏览器中的交互行为。它可以跨多种浏览器和平台运行，并且支持多种编程语言，包括Python、Java、C# 和 Ruby 等。以下是一个基本的Selenium使用教程概述： 1. 准备工作 安装浏览器：首先确保安装了要进行自动化操作 阅读全文

摘要： XPATH语法： 1.路径查询 //：查找所有子孙节点，不考虑层级关系 / ：找直接子节点 2.谓词查询 //div[@id] //div[@id="maincontent"] 3.属性查询 //@class 4.模糊查询 //div[contains(@id, "he")] //div[start 阅读全文

摘要： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 import json import jsonpath 阅读全文

摘要： 今天学习了爬虫 # 导入所需库 import urllib.request from lxml import etree # 设置目标URL和请求头信息，模拟Chrome浏览器访问 url = 'https://www.baidu.com/' headers = { 'User-Agent': 'M 阅读全文