随笔分类 -  Python

1
爬取汽车网站汽车数据
摘要：from selenium import webdriver from selenium.webdriver.firefox.options import Options import datetime import openpyxl import re import time import os 阅读全文
posted @ 2021-12-01 08:59 MoooJL 阅读(246) 评论(0) 推荐(0)
python3 print.format用法
摘要：print ( '{0},{1}' . format ( 'zhangk' , 32 )) print ( '{},{},{}' . format ( 'zhangk' , 'boy' , 32 )) print ( '{name},{sex},{age}' . format (age = 32 , 阅读全文
posted @ 2021-03-08 19:45 MoooJL 阅读(1170) 评论(0) 推荐(0)
Flask使用json或jsonify返回响应的数据
摘要：前言 在做网站前后端数据交互的时候，我们经常需要使用Ajax等方法向后端发送请求来获取响应的数据，而我们经常需要的就是json格式的响应数据，它实际上就是一个字符串。要知道Flask如何返回json响应数据，首先就需要知道如何将字典dict转化为json字符串。 使用json库dict和json字符 阅读全文
posted @ 2021-02-25 23:02 MoooJL 阅读(605) 评论(0) 推荐(1)
PythonWeb--Pycharm+Flask+MySQL实现
摘要：摘要：主要介绍Flask+Ajax前后台数据交互的使用，系统并不完善 代码 app.py from flask import Flask,render_template,request import pymysql import json app = Flask(__name__) #设置启动页 @ 阅读全文
posted @ 2021-01-18 21:11 MoooJL 阅读(347) 评论(0) 推荐(0)
Python操作MySQL数据库
摘要：操作步骤 建立数据库连接 import pymysql db = pymysql.connect(host="127.0.0.1", user="root", password="123456", db="student_mis", port=3306) cur = db.cursor() 执行数据 阅读全文
posted @ 2021-01-18 20:14 MoooJL 阅读(157) 评论(0) 推荐(0)
Python爬取豆瓣Top250电影信息
摘要：1、爬取豆瓣Top250电影信息以文本形式保存 数据：豆瓣电影 2、代码 import requests from bs4 import BeautifulSoup def get_movie(): headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 阅读全文
posted @ 2020-08-09 12:59 MoooJL 阅读(150) 评论(0) 推荐(0)
Python爬取QQ音乐榜单数据
摘要：1、爬取QQ音乐榜单数据并存入数据库（MySQL） 2、代码 import requests import json from bs4 import BeautifulSoup import pymysql def get_html(): url='https://u.y.qq.com/cgi-bi 阅读全文
posted @ 2020-08-09 12:56 MoooJL 阅读(1141) 评论(0) 推荐(0)
Python爬取链家二手房信息
摘要：1、爬取链家二手房信息，存入数据库（MySQL）数据来源：链家 2、数据库表结构 3、代码 '''使用面向对象的方式，搭建项目框架''' import requests from bs4 import BeautifulSoup import pymysql class LianJiaSpider( 阅读全文
posted @ 2020-08-08 17:08 MoooJL 阅读(670) 评论(0) 推荐(0)
Python爬取12306车次信息
摘要：1、数据来源：12306官网 2、代码 import requests import re def send_request(): headers = headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) Apple 阅读全文
posted @ 2020-08-08 17:03 MoooJL 阅读(622) 评论(0) 推荐(0)
Python爬取招聘网信息
摘要：1、数据来源：职友集 2、代码 import requests import openpyxl import time from bs4 import BeautifulSoup #用于解析和提取网页数据的 lst=[]#列表 def send_request(id,page): url = 'ht 阅读全文
posted @ 2020-08-08 16:59 MoooJL 阅读(446) 评论(3) 推荐(0)
Python爬取京东商品用户的评价
摘要：一、爬取京东商品手机的用户评价，包括评价、颜色、手机型号并存入数据库（MySQL） 二、数据库表结构 三、代码 import requests import time import json from pymysql import * def mes(productId,page): headers 阅读全文
posted @ 2020-08-07 13:09 MoooJL 阅读(935) 评论(0) 推荐(0)
Python爬取糗事百科视频
摘要：一、题目要求：爬取糗事百科上的视频并下载到本地磁盘 二、代码 1、使用正则表达式清洗数据 import requests import re headers = headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) App 阅读全文
posted @ 2020-08-07 11:54 MoooJL 阅读(271) 评论(0) 推荐(0)
Python爬取CVPR2018论文
摘要：摘要：爬取CVPR2018论文的内容：标题，简介，关键字，论文链接 1、数据库表的创建（MySQL） 注意：abstract长度不定，所以类型应为text，避免入坑 2、python爬取 import requests from bs4 import BeautifulSoup import pym 阅读全文
posted @ 2020-04-26 22:30 MoooJL 阅读(295) 评论(0) 推荐(0)
Python爬取世界疫情的实时数据
摘要：一、Python爬取世界疫情的实时数据 1、表结构（MySQL） 2、代码部分(数据：丁香医生) import requests from bs4 import BeautifulSoup import json import time from pymysql import * def mes() 阅读全文
posted @ 2020-04-06 10:35 MoooJL 阅读(2086) 评论(0) 推荐(0)
Python-统计值计算、词频统计
摘要：一、统计值计算 def getNum(): # 获取用户不定长度的输入 nums = [] iNumStr = input("请输入数字(回车退出): ") while iNumStr != "": nums.append(eval(iNumStr)) iNumStr = input("请输入数字( 阅读全文
posted @ 2020-03-21 21:32 MoooJL 阅读(396) 评论(0) 推荐(0)
python-爬取中国大学排名（第五周）
摘要：第五周 所花时间 15h左右 代码量 1000行左右 博客量 4篇 学到的知识点 python基础的一些知识 摘要：通过学习，对python中的BeautifulSoup有了一定的了解，通过和之前学过的requests库结合，爬取了2019年中国大学的排名。（数据均来自HTML页面） 一、中国大学排 阅读全文
posted @ 2020-03-21 20:34 MoooJL 阅读(251) 评论(0) 推荐(0)
Python-计算身体质量指标BMI
摘要：摘要：今天学习了python中常用的几个循环语句，判断条件的使用，并且完成了简单demo来加深对这些知识的巩固。 一、问题：天天向上 A:一年365天，每天进步1% B:工作5天休息2天，休息日下降1% 问：B的日工作量达到多少，才能和A一样。 def dayUP(df):#根据df参数计算日工作量 阅读全文
posted @ 2020-03-21 20:20 MoooJL 阅读(909) 评论(0) 推荐(0)
python-爬取图片
摘要：摘要：由于刚入门python，所以目前只学会了一些简单的东西，通过做两个简单的爬取demo来总结入门python爬取的总结。 一、京东商品的爬取 import requests#导入第三方库，必须 url = "https://item.jd.com/2967929.html"#网站 try: r 阅读全文
posted @ 2020-03-20 22:06 MoooJL 阅读(207) 评论(0) 推荐(0)
Python-温度的转换
摘要：摘要：本周开始学python，之前对于这门课程非常陌生，以为和其他编程语言一样，但是初步了解了一下python后，才发现了他的强大，用python编程语句更加简单，许多功能只需引入第三方库即可，大大提高了我们的编程效率。在初步学习了python以及他的turtle库后（turtle库是绘图时使用的） 阅读全文
posted @ 2020-03-16 20:34 MoooJL 阅读(670) 评论(0) 推荐(0)
Python爬取中国疫情的实时数据
摘要：一、中国疫情数据的实时爬取 1、表结构（MySQL） 2、代码部分(数据：丁香医生) import requests from bs4 import BeautifulSoup import json import time from pymysql import * def mes(): url 阅读全文
posted @ 2020-03-12 22:15 MoooJL 阅读(1687) 评论(0) 推荐(0)

1