06 2021 档案

【案例】matplotlib绘制雷达图
摘要：import matplotlib.pyplot as plt from sklearn.cluster import KMeans from sklearn.metrics import silhouette_score plt.rcParams['font.sans-serif'] = ['Ka 阅读全文
posted @ 2021-06-18 10:39 介个车车烫屁股 阅读(337) 评论(0) 推荐(0)
【教程】Python自定义库的封装
摘要：项目结构 setup-demo/ ├ setup.py # 安装文件 └ myapp/ # 源代码 ├ __init__.py ... setup.py脚本内容 #!/usr/bin/env python # -*- coding: utf-8 -*- from setuptools import 阅读全文
posted @ 2021-06-16 23:47 介个车车烫屁股 阅读(289) 评论(0) 推荐(0)
【笔记】《SQL进阶教程》读书笔记
摘要：####《SQL进阶教程》是一本讲解标准SQL的进阶书籍，书中大部分内容都来自作者记录自己实践总结和日常思考的个人博客，最大的特点是理论与实践相结合，除了讲述应该怎么做，还解释了其背后的原理，豆瓣评分9.5，非常值得一读。 阅读全文
posted @ 2021-06-10 23:16 介个车车烫屁股 阅读(119) 评论(0) 推荐(0)
【教程】利用Selenium爬取数据
摘要：Selenium简介 Selenium是一个web的自动化测试工具，最初是为网站自动化测试而开发的，Selenium可以直接运行在浏览器上，它支持所有主流的浏览器，可以接收指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏。【爬虫效率比较低】 安装方法如下： pip install selen 阅读全文
posted @ 2021-06-08 00:15 介个车车烫屁股 阅读(2158) 评论(0) 推荐(0)
【笔记】《Python编程从入门到实战》——变量与基础数据类型
摘要：变量 message = "Hello world!" print(message) """ 输出结果：Hello world! """ 上述代码中的message就是一个变量，每个变量都存储了一个值，"Hello world!"就是变量meassage的值。 变量命名规范 变量名只包含字母、数字、 阅读全文
posted @ 2021-06-07 23:40 介个车车烫屁股 阅读(116) 评论(0) 推荐(0)
【案例】Azkaban定时任务
摘要：azkaban任务表 CREATE TABLE `bi_azkaban_task_v1` ( `task_id` int(11) NOT NULL AUTO_INCREMENT COMMENT '任务id', `task_name` varchar(255) NOT NULL COMMENT '任务 阅读全文
posted @ 2021-06-04 16:45 介个车车烫屁股 阅读(378) 评论(0) 推荐(0)
【案例】Python调用高德API查询经纬度
摘要：import requests import json import re import pandas as pd def get_cor(address): # 获取单个地址坐标信息 ret = requests.get( url='https://restapi.amap.com/v3/geoc 阅读全文
posted @ 2021-06-03 18:55 介个车车烫屁股 阅读(402) 评论(0) 推荐(0)
【笔记】Presto优化
摘要：1.只选择使用必要的字段 由于采用列式存储，选择需要的字段可加快字段的读取、减少数据量。避免采用*读取所有字段 -- 正确的写法 SELECT id,name FROM users -- 错误的写法 SELECT * FROM users 2.过滤条件必须加上分区字段 -- 正确的写法 select 阅读全文
posted @ 2021-06-03 18:04 介个车车烫屁股 阅读(282) 评论(0) 推荐(0)
【教程】Linux上安装MySQL
摘要：相比Windows系统，Linux系统上安装MySQL比较简单，本文将详细介绍如何在Ubuntu系统安装MySQL。 PART 1 安装MySQL 1.更新软件源 sudo apt update 2.安装MySQL sudo apt-get install mysql-server sudo apt 阅读全文
posted @ 2021-06-03 00:13 介个车车烫屁股 阅读(62) 评论(0) 推荐(0)
【笔记】MySQL优化技巧10条
摘要：MYSQL优化方法 设计：存储引擎，字段类型，范式与逆范式 功能：索引，缓存，分区分表。 架构：主从复制，读写分离，负载均衡。 合理SQL：测试，经验。 一、选择合理的存储引擎 存储引擎是一种用来存储MySQL中对象（记录和索引）的一种特定的结构（文件结构），处于MySQL服务器的最底层，直接存储数 阅读全文
posted @ 2021-06-03 00:01 介个车车烫屁股 阅读(42) 评论(0) 推荐(0)
【笔记】Mysql中的count效率
摘要：列名为主键，count(列名)会比count(1)快。 列名不为主键，count(1)会比count(列名)快。 如果表多个列并且没有主键，则count(1)的执行效率优于count(*)。 如果有主键，则count主键）的执行效率是最优的。 如果表只有一个字段，则count(*)最优。 count 阅读全文
posted @ 2021-06-02 23:46 介个车车烫屁股 阅读(211) 评论(0) 推荐(0)
【笔记】Datetime库笔记
摘要：datetime是一个关于时间的库，其中包含date、time、datetime、timedelta等类对象。 date类 from datetime import date thedate = date(2020,1,1) print(thedate) """ 返回结果： 2020-01-01 t 阅读全文
posted @ 2021-06-02 23:36 介个车车烫屁股 阅读(63) 评论(0) 推荐(0)