摘要：
待补充 阅读全文
posted @ 2024-05-13 21:08
踩坑大王的日记
阅读(213)
评论(0)
推荐(0)
摘要：
待补充 阅读全文
posted @ 2024-05-13 21:05
踩坑大王的日记
阅读(42)
评论(0)
推荐(0)
摘要：
目录安装数据库安装Redis安装PostGreSQL实现步骤微博站点分析asyncio获取cookieaiohttp+redis构造待爬取URLpyppeteer构建爬虫执行爬虫性能优化thread构建线程redis Pipline爬取异常处理总结项目总结不足 安装数据库 安装Redis 该步骤实现 阅读全文
posted @ 2024-05-12 20:35
踩坑大王的日记
阅读(116)
评论(0)
推荐(0)
摘要：
目录异步编程OpenAPI文档相关命令 异步编程 FastAPI和Sanic都是异步框架 ASGI：一种接口协议，是WSGI的扩展，为了规范支持异步的Python Web服务器、框架和应用之间的通信定制的，囊括了同步和异步的通信规范。 OpenAPI文档 http://127.0.0.1:8000/ 阅读全文
posted @ 2024-05-12 19:03
踩坑大王的日记
阅读(109)
评论(0)
推荐(0)
摘要：
目录CentOS 7.9 服务器操作查看已启动的服务AWS EC2操作 CentOS 7.9 服务器操作 查看防火墙运行状态 firewall-cmd --state 开启防火墙 sudo systemctl start firewalld 开机自启动防火墙 sudo systemctl enabl 阅读全文
posted @ 2024-05-12 15:49
踩坑大王的日记
阅读(43)
评论(0)
推荐(0)
摘要：
目录项目概述数据预处理数据爬取数据清洗构建敏感词字典树去除不相关问题和回答去除敏感词去除HTML标签去除标点符号去除emoji去除夸夸词过滤长度,转换格式 项目概述 该项目构建一个基于UniLM的生成式夸夸bot UniLM 是在微软研究院在BERT的基础上,最新产出的预训练语言模型,被称为统一预训 阅读全文
posted @ 2024-05-09 17:10
踩坑大王的日记
阅读(99)
评论(0)
推荐(0)
摘要：
__name__是python中的内置变量，表示当前模块/方法/函数的名称 当.py文件被直接运行时，if name == 'main'之下的代码块将被运行；当.py文件以模块形式被导入时，if name == 'main'之下的代码块不被运行。 如： 定义const.py PI = 3.14 de 阅读全文
posted @ 2024-05-07 17:44
踩坑大王的日记
阅读(1199)
评论(0)
推荐(0)
摘要：
目录机器学习与深度学习比较神经网络简述感知机单层感知机 Perceptron多层感知机/全连接神经网络 Multilayer Perceptron/MLP卷积神经网络CNN Convolutional Nerual Nets循环神经网络RNN Recurrent Neural NetsLSTM Lo 阅读全文
posted @ 2024-05-07 14:19
踩坑大王的日记
阅读(68)
评论(0)
推荐(0)
摘要：
目录一、线性回归1.一元线性回归2.二元线性回归3.多元线性回归4.总结二、逻辑回归 一、线性回归 1.一元线性回归 \[f(x)=ax+b \]均方误差最小化(最小二乘法) 即找到一条直线，使所有样本到直线上的欧式距离之和最小 \[min\sum_{i=1}^{m}(f(x_i)-y_i)^2 = 阅读全文
posted @ 2024-05-07 14:17
踩坑大王的日记
阅读(53)
评论(0)
推荐(0)
摘要：
目录使用selenium使用requests 使用selenium from selenium.webdriver import Chrome,ChromeOptions from selenium.webdriver.support.wait import WebDriverWait from s 阅读全文
posted @ 2024-05-07 14:17
踩坑大王的日记
阅读(161)
评论(1)
推荐(0)
摘要：
目录思路总结问题总结一、经验误差与过拟合二、模型选择方法专家样本分层采样 stratified samlping选择方法总结1.留出法(1)分层采样(2)单次留出法(3)多次留出法2.交叉验证(1)k折交叉验证(2)留一法(3)P次k折交叉验证3.自助法/包外估计 bootstrapping三、性能 阅读全文
posted @ 2024-04-19 17:34
踩坑大王的日记
阅读(469)
评论(0)
推荐(0)
摘要：
目录一、基本术语二、假设空间1.归纳和演绎2.版本空间三、归纳偏好概念奥卡姆剃刀（简单优先） 一、基本术语 学习（训练）：从数据中学得模型的过程 测试：学得模型后，使用其样本进行预测的过程 假设：学得模型对应的关于数据的某种潜在规律 分类：输出结果是离散值 回归：输出结果是连续值 泛化能力：学得模型 阅读全文
posted @ 2024-04-06 00:00
踩坑大王的日记
阅读(52)
评论(0)
推荐(0)
摘要：
import requests,time,random from fake_useragent import UserAgent urls=open(r'E:\01pycharm project\网络爬虫技术\sjj1.txt',encoding='utf-8').read().split() i= 阅读全文
posted @ 2024-04-05 23:33
踩坑大王的日记
阅读(59)
评论(0)
推荐(0)
摘要：
目录使用selenium使用requests 使用selenium from selenium.webdriver import Chrome,ChromeOptions from selenium.webdriver.support.wait import WebDriverWait from s 阅读全文
posted @ 2024-04-05 23:02
踩坑大王的日记
阅读(560)
评论(0)
推荐(0)
浙公网安备 33010602011771号