04 2022 档案

hadoop_java操作hdfs
摘要：导入lib包 public class HDFSDemo { FileSystem fs = null; @Before public void init() throws Exception{ fs = FileSystem.get(new URI("hdfs://itcast01:9000"), 阅读全文
posted @ 2022-04-24 14:37 三重丶刘德华 阅读(32) 评论(0) 推荐(0)
SQL_索引优化
摘要：mysql的查询流程 mysql客户端通过协议与mysql服务器建立连接，发送查询语句，先检查查询缓存，如果命中，直接返回结果，否则进行语句解析，有一系列预处理，比如检查语句是否写正确了，然后是查询优化（比如是否使用索引扫描，如果是一个不可能的条件，则提前终止），生成查询计划，然后查询引擎启动，开始 阅读全文
posted @ 2022-04-24 14:21 三重丶刘德华 阅读(106) 评论(0) 推荐(0)
爬虫_numpy
摘要：1. 安装numpy 打开cmd 输入：pip install numpy 2. numpy数据类型 名称描述 bool_ 布尔型数据类型（True 或者 False） int_ 默认的整数类型（类似于 C 语言中的 long，int32 或 int64） intc 与 C 的 int 类型一样，一 阅读全文
posted @ 2022-04-24 14:13 三重丶刘德华 阅读(51) 评论(0) 推荐(0)
ypthon_xpath
摘要：使用时先安装 lxml 包 开始使用# 和beautifulsoup类似，首先我们需要得到一个文档树 把文本转换成一个文档树对象 from lxml import etree if __name__ == '__main__': doc=''' <div> <ul> <li class="item- 阅读全文
posted @ 2022-04-10 20:31 三重丶刘德华 阅读(51) 评论(0) 推荐(0)
SQL_范式
摘要：分析 ：我们要结合“第二范式”的特点：“完全依赖”并且观察上面的俩个表我们可以发现：表中的快递单号 和 商品编号为联合主键， 但是在我们表一中商品名称，价格（单价） 只与“商品编号有关系”所以这就产生了“部分依赖” ，所以不满足“第二范式”第二个表是满足条件的。第三范式： 定义：属性不能传递依赖于主 阅读全文
posted @ 2022-04-10 20:27 三重丶刘德华 阅读(44) 评论(0) 推荐(0)
hadoop安装过程
摘要：开启网络,ifconfig指令查看ip 利用filezilla上传jdk到opt 解压hadoop安装包 #解压 tar -zxvf hadoop-2.2.0.tar.gz 修改配置文件（5个） 路径:/opt/hadoop-2.2.0/etc/hadoop 第一个：hadoop-env.sh #在 阅读全文
posted @ 2022-04-10 20:22 三重丶刘德华 阅读(69) 评论(0) 推荐(0)
SQL_视图
摘要：CREATE TABLE IF NOT EXISTS blog(id INT PRIMARY KEY AUTO_INCREMENT,title VARCHAR(50) DEFAULT NULL,content VARCHAR(100) DEFAULT NULL,author_id INT DEFAU 阅读全文
posted @ 2022-04-03 21:43 三重丶刘德华 阅读(24) 评论(0) 推荐(0)
ssh服务
摘要：终端工具主要帮助运维人员连接远程的服务器，常见终端工具有：Xshell、secureCRT、Putty等 输入IP地址和用户名 可视化的界面传输工具：Filezilla 输入IP和用户名还有密码和默认端口 链接好之后 支持服务器文件直接拖拽到本地，也可以在右侧窗口选择需要下载的文件，右键，点选“下载 阅读全文
posted @ 2022-04-03 14:02 三重丶刘德华 阅读(58) 评论(0) 推荐(0)
爬虫_scrapy案例
摘要：打开一个cmd，输入 python -m pip install --upgrade pip pip install wheel pip install lxml pip install twisted pip install pywin32 pip install scrapy 然后输入 scra 阅读全文
posted @ 2022-04-03 13:30 三重丶刘德华 阅读(44) 评论(0) 推荐(0)