07 2020 档案
摘要：MYSQL索引设计原则 索引设计原则 选择唯一性索引 唯一性索引的值是唯一的，可以更快速的通过该索引来确定某条记录 为常作为查询条件的字段建立索引 如果某个字段经常用来做查询条件，那么该字段的查询速度会影响整个表的查询速度。因此，为这样的字段建⽴立索引，可以提⾼高整个表的查询速度 限制索引的数目 索
阅读全文
摘要：Mysql Error SQL ERROR 2013 注意区分ssh与数据库账号与密码，不要混淆填错 填写正确还是有问题则检查my.cnf文件中是否有 bind-address = 127.0.0.1 如有，请注释。 SQL ERROR 1130 问题原因在于刚安装的mysql默认情况下root用户
阅读全文
摘要：hdfs fsimage和editlog fsimage，namenode的元数据镜像文件，保存在磁盘 editlog，namenode操作日志 fstime，最近一次的checkpoint时间 metadata，一个文件存储在哪些DataNode节点的哪些位置的元数据信息 datanode上存储文
阅读全文
摘要：MapReduce简单案例 案例一 文件合并和去重操作 对于两个输入文件，即文件A和文件B，请编写MapReduce程序，对两个文件进行合并，并剔除其中重复的内容，得到一个新的输出文件C。下面是输入文件和输出文件的一个样例供参考。 输入文件A的样例如下： 数据 20150101 x 20150103
阅读全文
摘要：sbt换源 两种方法不一定都能用 方法一 Linux系统，则进入Bash执行如下命令： cd ~ mkdir .sbt cd .sbt 然后创建 repositories 文件内容如下，并将文件拷贝到 .sbt 目录下 [repositories] local huaweicloud-maven:
阅读全文
摘要：Redis Cluster知识点概括性整合 Redis分区方案 redis的分区方案共有三种：客户端分区方案，代理分区方案，查询路由方案（cluster） Redis Cluster框架 redis采用去中心化的分布式结构框架，所有节点通过gossip协议相连，客户端只需直连其中一个节点即可进行访问
阅读全文
摘要：python文件批量重命名 代码如下： # -*- coding: gbk -*- import os class fileRename(): def __init__(self, path): self.__path = path self.__order = {} self.__files =
阅读全文
摘要：BiliBili视频信息爬虫可视化 说明 该可视化一共使用了四个数据源，分别是2017，2018，2019三年各五千条连续数据，以及总十万余条视频数据，用于总体与对比分析。** 可视化主要手段包括matplotlib以及pyecharts的两个版本（新版本1.7.1，旧版本0.1.9.4，两者语法区
阅读全文
摘要：BiliBili视频信息爬虫 代码如下： import requests import random from bs4 import BeautifulSoup import json import pandas as pd import os import pickle import time i
阅读全文
摘要：Linux终端将进程挂于后台的方法 如果希望终端关闭后，程序继续在后台运行 可以使用如下命令 nohup orderthere & 之后会提示一些信息，回车即可，此外，在使用nohup命令后，会自动将终端日志信息输出于当前目录下的nohup.out文件中。 命令中的&解释： 将该符号放置于启动参数后
阅读全文
摘要：职工-工程数据库课程设计 以下GUI界面均为Navicat 1) E-R总体图&&关系模式 打⚪为主码 部门 department（部门号did⚪，部门名dname） 职位 job（职位号jid⚪，职位名jname，小时工资率srate） 职工 staff（职工号sid⚪，职工名 sname，部门号
阅读全文
摘要：python3.8通过shell快速安装 sudo apt-get update sudo apt-get install software-properties-common#更新安装包并安装必要组件 sudo add-apt-repository ppa:deadsnakes/ppa#添加源 s
阅读全文
摘要：使用 json.dumps() 将 dict 转化为 json 数据的时候, 中文会显示为对应的 unicode 编码形式, 如果是将数据发送到第三方, 那么也会显示 unicode 编码形式 demo: param = { "code": "0", "message": "中文内容" } para
阅读全文
摘要：首先去购买服务器，本人选择的是阿里云，学生党在优惠下能够以一百左右的价格买到一年的基础云服务器，还是很香的。 远程连接可以使用xshell软件，上传下载软件除了直接使用xftp还可以在cmd中使用scp命令进行文件传输。 正式开始安装 先安装screen，因为后续切换yum源后会只能安装国内镜像网站
阅读全文
摘要：打包为jar文件后可直接在命令行调用 大体上实现了创建删除重命名文件、创建删除重命名文件夹、上传下载文件、显示目录下文件的功能 import java.io.BufferedReader; import java.io.FileNotFoundException; import java.io.IO
阅读全文
摘要：首先打开/etc/my.cnf(默认安装情况下为此路径) vim /etc/my.cnf 如果无法找到该文件，可以试着使用以下指令 find / -name my.cnf 在[mysqld]下方（注意一定是要在此文本段内 不能放在下一个[xxx]后） 单独添加一行skip-grant-tables，
阅读全文
摘要：学习python的过程中自己写了一个爬虫，爬取成功后自动通过win10toast发送通知消息。 在pycharm中已经可以正常运行，但是通过脚本执行.py文件的时候提示无法找到win10toast模块。当时使用的命令为 py CheckNew.py 经过一番搜索，通过sys.path.append方
阅读全文
摘要：ambari-server安装流程 1.还原系统 使用ultralso以及ubuntu18.04镜像文件制作启动盘 从此处打开，选择需要用到的镜像文件 点击启动，写入硬盘映像 写入方式选择HDD+或者HDD 便捷启动->写入新的驱动器引导扇区->syslinux 制作完u盘后插到
阅读全文
浙公网安备 33010602011771号