踩坑大王

2024年5月7日

摘要：目录一、线性回归1.一元线性回归2.二元线性回归3.多元线性回归4.总结二、逻辑回归一、线性回归 1.一元线性回归 \[f(x)=ax+b \]均方误差最小化(最小二乘法) 即找到一条直线，使所有样本到直线上的欧式距离之和最小 \[min\sum_{i=1}^{m}(f(x_i)-y_i)^2 = 阅读全文

posted @ 2024-05-07 14:17 踩坑大王阅读(30) 评论(0) 推荐(0)

【爬虫】项目篇-使用selenium、requests爬取天猫“华为手机”的商品评价

摘要：目录使用selenium使用requests 使用selenium from selenium.webdriver import Chrome,ChromeOptions from selenium.webdriver.support.wait import WebDriverWait from s 阅读全文

posted @ 2024-05-07 14:17 踩坑大王阅读(134) 评论(1) 推荐(0)

2024年4月19日

【机器学习】第二节-模型评估与选择-模型评估方法

摘要：目录思路总结问题总结一、经验误差与过拟合二、模型选择方法专家样本分层采样 stratified samlping选择方法总结1.留出法(1)分层采样(2)单次留出法(3)多次留出法2.交叉验证(1)k折交叉验证(2)留一法(3)P次k折交叉验证3.自助法/包外估计 bootstrapping三、性能阅读全文

posted @ 2024-04-19 17:34 踩坑大王阅读(355) 评论(0) 推荐(0)

2024年4月16日

不用下载如何在网页中浏览ppt内容

摘要：待更新阅读全文

posted @ 2024-04-16 15:50 踩坑大王阅读(10) 评论(0) 推荐(0)

2024年4月6日

【机器学习】第一节 - 基本概念

摘要：目录一、基本术语二、假设空间1.归纳和演绎2.版本空间三、归纳偏好概念奥卡姆剃刀（简单优先）一、基本术语学习（训练）：从数据中学得模型的过程测试：学得模型后，使用其样本进行预测的过程假设：学得模型对应的关于数据的某种潜在规律分类：输出结果是离散值回归：输出结果是连续值泛化能力：学得模型阅读全文

posted @ 2024-04-06 00:00 踩坑大王阅读(33) 评论(0) 推荐(0)

2024年4月5日

【爬虫】项目篇-新东方六级听力音频

摘要： import requests,time,random from fake_useragent import UserAgent urls=open(r'E:\01pycharm project\网络爬虫技术\sjj1.txt',encoding='utf-8').read().split() i= 阅读全文

posted @ 2024-04-05 23:33 踩坑大王阅读(31) 评论(0) 推荐(0)

【爬虫】项目篇-使用selenium、requests爬取天猫商品评论

摘要：目录使用selenium使用requests 使用selenium from selenium.webdriver import Chrome,ChromeOptions from selenium.webdriver.support.wait import WebDriverWait from s 阅读全文

posted @ 2024-04-05 23:02 踩坑大王阅读(504) 评论(0) 推荐(0)

【爬虫】项目篇-豆瓣电影周榜Top10，保存至Redis

摘要：写法一：编写两个爬虫程序文件：爬虫1将豆瓣一周口碑榜的电影url添加到redis中名为movie_url的列表中（注意避免多次运行导致重复的问题）；爬虫2从movie_url中读出网址，爬取每一部电影的导演、主演、类型、制片国家/地区、语言、上映日期、片长，并将它们保存到redis的hash表阅读全文

posted @ 2024-04-05 22:54 踩坑大王阅读(101) 评论(0) 推荐(0)

【爬虫】项目篇-爬取福州公交线路并保存至MongoDB

摘要： #http://www.fz-bus.cn/index.asp #1）在MongoDB中创建一个数据库和一个集合。 #2）在程序执行过程中可输入线路名称查询公交线路， # 每查询到一条线路的信息后，查询MongoDB数据库中是否存在该线路。若存在，则不做任何操作，否则执行第3步。 #将线路名称、起点阅读全文

posted @ 2024-04-05 22:49 踩坑大王阅读(55) 评论(0) 推荐(0)

【爬虫】项目篇-丁香园的疫情数据

摘要： ``` #编写程序，从丁香园获取国内近期疫情数据，按省份提取当前确诊数，# 确诊总数，疑似病例数，治愈数，死亡数，高危数等数据，保存到csv文件或excel文件中。import requestsimport xlsxwriterfrom fake_useragent import UserAgent 阅读全文

posted @ 2024-04-05 22:47 踩坑大王阅读(89) 评论(0) 推荐(0)

【爬虫】项目篇-豆瓣读书Top250（https://book.douban.com/top250）

摘要：抓取豆瓣读书Top250（https://book.douban.com/top250）每本书的书名、作者、出版社、出版时间、价格、评分等数据，将结果分别保存为csv文件和excel文件 import xlwt import xlsxwriter import re import request 阅读全文

posted @ 2024-04-05 22:45 踩坑大王阅读(1095) 评论(0) 推荐(0)

【爬虫】项目篇-在https://www.kanunu8.com/book2抓取电子书

摘要：目录1)使用正则表达式2)使用bs4 1)使用正则表达式 #使用requests库和正则表达式抓取在https://www.kanunu8.com/book3/任选的一本电子书 import requests import re import os import time header = { 'u 阅读全文

posted @ 2024-04-05 22:43 踩坑大王阅读(473) 评论(0) 推荐(0)

【爬虫】debug篇-关于fake_useragent无法使用：Error occurred during loading data. Trying to use cache server https://fake-useragent.herokuapp.com/browsers/0.1.11

摘要： Error occurred during loading data. Trying to use cache server https://fake-useragent.herokuapp.com/browsers/0.1.11 Traceback (most recent call last): 阅读全文

posted @ 2024-04-05 21:56 踩坑大王阅读(155) 评论(0) 推荐(0)

【爬虫】项目篇-使用re、Xpath爬取豆瓣电影周榜Top10，保存为CSV

摘要：目录使用re爬取+为请求头，保存为csv使用re爬取2+不保存使用xpath+lxml.html+lxml.etree+不保存使用re爬取+为请求头，保存为csv import requests import re import csv from fake_useragent import Use 阅读全文

posted @ 2024-04-05 21:50 踩坑大王阅读(78) 评论(0) 推荐(0)

【爬虫】项目篇-使用xpath爬取搜房网二手房信息

摘要：目录1）无代理+随机请求头+lxml.etree+百度地图api获取经纬度2）无代理+固定请求头+lxml.html3）无代理+固定请求头+使用HTMLSeesion4）代理池+固定请求头+lxml.html 1）无代理+随机请求头+lxml.etree+百度地图api获取经纬度 #使用reques 阅读全文

posted @ 2024-04-05 21:31 踩坑大王阅读(105) 评论(0) 推荐(0)

Loading

公告