11 2020 档案

网络爬虫理论——HTTP协议
摘要：HTTP 1.超文本传输协议 2.无状态链接 一.HTTP访问流程 1.网页端输入网站访问 graph LR 客户端 >htpp请求 graph LR 服务端接受反馈 >返回请求数据 二.HTTP请求方式与过程 1.HTTP请求过程 ①HTTP客户端端发起请求，创建一个访问服务器的端口（默认80端口 阅读全文
posted @ 2020-11-30 17:01 唐某人-python 阅读(129) 评论(0) 推荐(0)
网络爬虫理论——网络爬虫入门认知
摘要：网络入门爬虫认知 网络爬虫：模拟浏览器上网流程，自动地抓取万维网信息的程序或者脚本 数据挖掘：抓取互联网上的数据 法律认知：法律合法，在使用中有违法的风险 1.爬虫分类 善意爬虫：爬取公开信息，且不运行服务器运行 恶意爬虫： 1.干扰被访网站的运行 2.爬取被法律保护的信息 2.防止违法风险 1.优 阅读全文
posted @ 2020-11-30 16:58 唐某人-python 阅读(276) 评论(0) 推荐(0)
3.学习numyp的矩阵
摘要：Numpy提供了ndarray来进行矩阵的操作,在Numpy中 矩阵继承于NumPy中的二维数组对象，但是矩阵区别于数组，不可共用数组的运算规律 一.创建矩阵 import numpy as np mat（'第0行；第1行；…..;第n行'）或 mat（[[第0行],[第1行],…..,[第n行]] 阅读全文
posted @ 2020-11-14 21:15 唐某人-python 阅读(616) 评论(0) 推荐(0)
2.掌握numpy数组
摘要：一.改变数组形态 reshape()——通过改变数组的维度改变数组形态 import numpy as np Array=np.arange(1,17,1) Array Array_1=np.arange(1,17,1).reshape(4,4) #将数据从(16.)变为（4，4） Array_1 阅读全文
posted @ 2020-11-14 20:30 唐某人-python 阅读(294) 评论(0) 推荐(0)
1.认识numpy的数组
摘要：认识ndarray ——ndarray:用于存储单一数据类型的多维数组 ndarray基础属性的认识 import numpy as np #将numpy简写为np方便调用 1.通过以下实例来认识array 实例1：认识array的创建与属性 Array_1=np.array([[1,2,3,4], 阅读全文
posted @ 2020-11-12 20:46 唐某人-python 阅读(239) 评论(0) 推荐(0)
数据分析简单使用pyecharts进行可视化
摘要：一.pyecharts 安装问题 现在的pyecharts的版本有0.5 1.0 其中pyecharts0.5已经停止更新 由于python解释器默认pyecharts是0.1.9.4版本，所以高于版本的会在使用时有报错 例如 ''' from pyecharts import Bar 所以笔者的办 阅读全文
posted @ 2020-11-06 20:25 唐某人-python 阅读(697) 评论(0) 推荐(0)
数据合并combing
摘要：combing可用于在合并时的将nan替换 阅读全文
posted @ 2020-11-06 12:10 唐某人-python 阅读(144) 评论(0) 推荐(0)
数据合并 主键合并（merge，join）
摘要：以评价数为主键 (以此为例) merge参数 merge主键合并 join参数 join主键合并 阅读全文
posted @ 2020-11-06 12:03 唐某人-python 阅读(1243) 评论(0) 推荐(0)
数据合并append
摘要：只限于纵向（同列名） 例子 append适用于添加 阅读全文
posted @ 2020-11-06 11:28 唐某人-python 阅读(160) 评论(0) 推荐(0)
数据合并concat
摘要：横向堆叠 axis=1 横向堆叠（不论列名相同否） 1.join=outer 2.join=inner 纵向堆叠 axis=0异列名纵向堆叠 1.join=inner 2.join=outer 可以看出有报错同时但结果依然进行 axis=0同列名纵向堆叠 join=inner等效join=outer 阅读全文
posted @ 2020-11-06 11:22 唐某人-python 阅读(182) 评论(0) 推荐(0)
数据整合 数据导入，存储
摘要：调用pands库的read进行读取，所读取的文件以DataFrame格式存储 常用数据导入 1.数据库读取 （to_sql) from sqlalchemy import create_engine 连接器=create_engine('mysql+pymysql://root:密码@127.0.0 阅读全文
posted @ 2020-11-06 09:34 唐某人-python 阅读(154) 评论(0) 推荐(0)