11 2020 档案

mysql索引
摘要:索引的的创建跟存储的引擎是挂钩的,存储引擎表示不同数据在不同磁盘的不同组织形式。 聚簇索引与非聚簇索引:取决于数据与索引是否是放在一起的。 例如InnoDb就是只能有一个聚簇索引但可以有很多非聚簇索引(向InnoDb插入数据的时候必须要包含一个索引的key值,而且你创建表的时候如果不设置索引,索引的 阅读全文

posted @ 2020-11-30 12:46 沫戏回首 阅读(72) 评论(0) 推荐(0)

《软件需求》(一)
摘要:许多软件问题都源于收集、记录、协商和修改产品需求过程中的方式不当,包括信息收集方式不正规,没有明确提出想要的功能,假设是未经过沟通的错误假设,需求的定义不够充分,以及未经仔细考虑进行需求变更等。在软件开发中遇到的问题时,人们常常轻率地将其忽略。软件项目中40%~60%的缺陷都是由需求分析阶段的过失所 阅读全文

posted @ 2020-11-29 23:16 沫戏回首 阅读(128) 评论(0) 推荐(0)

解决Hadoop启动时,没有启动datanode
摘要:参考链接,十分nb:http://dblab.xmu.edu.cn/blog/818-2/ 阅读全文

posted @ 2020-11-25 13:45 沫戏回首 阅读(167) 评论(0) 推荐(0)

Mapreduce之mappper_join
摘要:Mapreduce的mapper方法里的多表联查。 首先要确定一个大表和一个小表,然后将小表放在内存的缓冲区之中。 job.addCacheFile(new URI("hdfs://master:9000/mapreduce2/in/product.txt")); 然后在mapper方法之中,执行的 阅读全文

posted @ 2020-11-20 00:01 沫戏回首 阅读(113) 评论(0) 推荐(0)

Mybatis学习---第一个查询小程序
摘要:Mybatis的官方文档:https://mybatis.org/mybatis-3/index.html 学习Mybatis的原因是:jdbc代码太复杂,而mybatis会简化jdbc,更容易上手。是一个框架。 一、需要导入依赖,在pom.xml中 1、mysql的jar包 2、Mybatis的j 阅读全文

posted @ 2020-11-17 16:43 沫戏回首 阅读(75) 评论(0) 推荐(0)

centos下安装hive
摘要:前提是你需要首先安装好mysql 首先要根据自己hadoop的版本查看一下hive与hadoop的兼容性 我们要去官网选择可以兼容的版本下载hive的安装包:http://archive.apache.org/dist/ 然后将hive的压缩包传到虚拟机中去,可以利用远程 控制软件。 然后将hive 阅读全文

posted @ 2020-11-16 19:40 沫戏回首 阅读(271) 评论(0) 推荐(0)

centos7.8安装mysql
摘要:今天来说一下我在centos7.8下安装mysql的步骤: 首先查看你的虚拟机的版本信息:lsblk 然后去官网下载mysql的安装包:https://dev.mysql.com/downloads/mysql 我下载的是5.6.50: 选择RPM Bundle这个文件。 可以使用远程操控软件上传到 阅读全文

posted @ 2020-11-16 01:56 沫戏回首 阅读(691) 评论(0) 推荐(0)

idea-maven操作虚拟机hadoop需要的依赖
摘要:本机配置hadoop的环境,需要有编译过的windowsd版本的hadoop(配置环境跟配置jdk本地jdk是一摸一样的) 配置好环境需要将hadoop.dll复制一份到C盘的windows/systerm32下面去。 <dependencies> <dependency> <groupId>org 阅读全文

posted @ 2020-11-12 16:13 沫戏回首 阅读(559) 评论(0) 推荐(0)

解决eclipse导入jar包buildpath的问题--直接构建库(library)
摘要:我如果你的一个项目太大的话,你就需要在lib下面复制很多的jar包,然后一个一个右键buildpath,这样就太麻烦了。 首先你需要整理你的jar进行分类,存储在本地对应的文件夹中。 对应的文件下面放的就是不同的jar包。 接下来构建library库。 当你新建一个项目后,右键项目的buildpat 阅读全文

posted @ 2020-11-12 00:04 沫戏回首 阅读(1056) 评论(0) 推荐(0)

python-基于xpath的聚焦爬虫学习
摘要:XPath 是一门在 XML 文档中查找信息的语言。 XPath 是 XSLT 中的主要元素。 XQuery 和 XPointer 均构建于 XPath 表达式之上。 他可以适用于 多种语言,个人感觉比较实用。 解析原理 类似于bs4: from lxml import etree 实例化一个etr 阅读全文

posted @ 2020-11-10 22:12 沫戏回首 阅读(105) 评论(0) 推荐(0)

python-基于bs4的聚焦爬虫学习
摘要:学习了基于bs4聚焦爬虫:bs4比较局限只能是python使用。个人感觉不是很好使用。 bs4数据解析原理:1、实例化一个beautifulSoup对象,并且将页面源码加载到该对象中 2、通过beautifulSoup对象中的相关属性或者方法进行标签定位和数据提取 下面是我的测试代码和Beautif 阅读全文

posted @ 2020-11-10 21:59 沫戏回首 阅读(132) 评论(0) 推荐(0)

python爬虫学习:网页采集器、豆瓣电影爬取、百度翻译
摘要:一、百度翻译 import requests import json if __name__ == '__main__': word = input('enter a word:') url = 'https://fanyi.baidu.com/sug' headers = { 'User-Agen 阅读全文

posted @ 2020-11-09 23:54 沫戏回首 阅读(241) 评论(0) 推荐(0)

入门爬虫-requests模块
摘要:requests模块:python原生的一款基于网络请求的模块,功能非常强大,简单便捷,效率极高, 作用:模拟浏览器发送请求。 需要在你的应用程序中导入该模块,首先安装。 搜索requests 然后点击下面的install即可,在项目中就可用通过,import requests引用 requests 阅读全文

posted @ 2020-11-09 23:47 沫戏回首 阅读(70) 评论(0) 推荐(0)

select 语句1——模糊查询,联表查询
摘要:首先来看一下数据库的设计首先是建表 grade: CREATE TABLE `grade` ( `gradeid` int(11) NOT NULL AUTO_INCREMENT COMMENT '年级编号', `gradename` varchar(50) NOT NULL COMMENT '年级 阅读全文

posted @ 2020-11-08 20:14 沫戏回首 阅读(893) 评论(1) 推荐(1)

mysql数据库引擎——INNODB和MYISAM的区别
摘要:MYISAM:节省空间,速度较快 INNODB:安全性高,事物的处理,多表多用户操作 所有的数据库文件的都存在data目录下,一个文件夹就对应一个数据库,本质还是文件的存储。 建表时选择引擎后对应的文件的区别: InnoDb:在数据库表中只有一个*.frm文件,以及上层目录下的ibdata1文件。 阅读全文

posted @ 2020-11-08 10:50 沫戏回首 阅读(80) 评论(0) 推荐(0)

python查看导入的模块都有哪些对外提供的接口
摘要:无论学任何一门语言查看帮助文档是重要的: import random # dir查看模块中所有的方法 # print(dir(random)) # 如果dir查看出来有_all__的话,可以通过模块名._all_查看对外提供的接口 # print(random.__all__) # 查看帮助文档 # 阅读全文

posted @ 2020-11-07 01:10 沫戏回首 阅读(621) 评论(0) 推荐(0)

java将10/Nov/2016:00:01:02 +0800转换时间为2016-11-10 00:01:02
摘要:转换时间格式的工具类: package com.mysql; import java.text.SimpleDateFormat; import java.util.Date; import java.util.Locale; import com.sun.org.apache.xerces.int 阅读全文

posted @ 2020-11-05 13:52 沫戏回首 阅读(648) 评论(0) 推荐(0)

java处理Txt文件并且存入数据库
摘要:txt文件是存储在电脑上,思路是: 先将txt按照每一行读取,将读到的文件存在list数据中。然后每次循环将list的每一个数据进行按照你的条件拆分,我是按照“,”进行拆分的。 先看一下我的txt文件: 这是拆分后的结果: package com.mysql; import java.io.Buff 阅读全文

posted @ 2020-11-05 13:46 沫戏回首 阅读(4755) 评论(0) 推荐(0)

使用ajax传值,后端返回不了前端数据
摘要:今天在layui的table--tender时候,用ajax传值,传过去数据,但是后端进行玩操作之后,传不回来数据。 但是这个例子是我之前测试好的,没有出现问题,但是在新的项目确实是用不了,返回不了数据。(通过控制台查看,没有跳到servlet 中的方法)仔细检查,我把他们之前放在了form表单中, 阅读全文

posted @ 2020-11-03 17:11 沫戏回首 阅读(624) 评论(0) 推荐(0)

echarts展示数据库的信息
摘要:你可以选择要根据什么条件查,以及显示的图表是哪一种类型的。我这里做了柱状、折线、饼图。前两种的option设置差不多,但是饼图是不一样的。所以在做了判断才使用对应的配置项和数据显示图表。 通过ajax像后台发送请求数据,从数据库查信息。看一下我的sql语句: String sql="select " 阅读全文

posted @ 2020-11-03 00:55 沫戏回首 阅读(1284) 评论(0) 推荐(0)

修改json字符串中的key值
摘要://原json 格式 {"id":"333","name":"xxxx"} //将 json 字符串转换为 json 对象 var json = JSON.parse(jsonString); var value = ""; for (var i = 0;i<json.length;i++) { v 阅读全文

posted @ 2020-11-02 22:26 沫戏回首 阅读(1140) 评论(0) 推荐(0)

动态综合条件查询+嵌套结构
摘要:动态添加条件,有并,或、根据你输入的字段以及选择的属性,来进行查询,查询的方式有精确查询、模糊查询。 下面的分页是layui-table实现的,是上一篇实现的。也可以不用,这只是你查出来的数据现实的一个样式而已。 先看效果图: 前端实现代码:(你要是不用layui的话就给查询的点击事件做一个ajax 阅读全文

posted @ 2020-11-02 02:34 沫戏回首 阅读(603) 评论(0) 推荐(0)

在后台解析前端传递的json到list中
摘要:花了将近一个多小时来研究这个问题,几近崩溃。 解决方法:首先创建与你传过来的json数据name字段对应的实体类。 例[{"name":"1","id","1"},{"name":"2","id","2"}],那么你的实体类的私有变量就是name,id这两个 我的实体类: package User; 阅读全文

posted @ 2020-11-01 03:17 沫戏回首 阅读(915) 评论(0) 推荐(0)

layui-table前端获取标签数据以json的格式封装传到后端
摘要:可得说说这个问题,今天开始试的时候只是通过前端传递一个数据到后端,通过简单的数据接口就可以实现 table render中的url:"MessageServlet?method=layuisearch&(这里是你想传递的参数,如name=...)" 最后添加了许多的数据,有很大的数据集需要向后端发送 阅读全文

posted @ 2020-11-01 03:02 沫戏回首 阅读(1348) 评论(0) 推荐(0)

导航