随笔分类 -  大数据

上一页 1 ··· 8 9 10 11 12 13 14 15 下一页
摘要:这里面有几点需要大家留意:A. 一个功能是否要事务,必须纳入设计、编码考虑。不能仅仅完成了基本功能就ok。B. 如果加了事务,必须做好开发环境测试(测试环境也尽量触发异常、测试回滚),确保事务生效。C. 以下列了事务使用过程的注意事项,请大家留意。 1. 不要在接口上声明@Transactional 阅读全文
posted @ 2018-03-15 11:37 星朝 阅读(459) 评论(0) 推荐(0)
摘要:大数据处理是一个头疼的问题,特别当达不到专业DBA的技术水准时,对一些数据库方面的问题感到无赖。所以还是有必要了解一些数据库方面的技巧,当然,每个人都有自己的数据库方面的技巧,只是八仙过海,所用的武功不同而已。我把我最常用的几种方式总结来与大家分享,大家还有更多的数据库设计和优化的技巧,尽量的追加到 阅读全文
posted @ 2018-03-08 17:59 星朝 阅读(6726) 评论(0) 推荐(6)
摘要:自定义类继承FreemarkerManager类,重写protected Configuration createConfiguration(ServletContext servletContext)throws TemplateException方法定义有哪些TemplateDirectiveM 阅读全文
posted @ 2018-02-12 17:25 星朝 阅读(541) 评论(0) 推荐(0)
摘要:步骤: 1、首先是要生成验证码 2、对验证码类进行调用:主要 实现的是  将验证码图片 输出到response.getOutputStream()这个输出流中 调用时,可以在页面调用,也可以在servlet中调用,我推荐是单独的一个servlet调用,在页面调用可能会出现异常,但是不影响使 阅读全文
posted @ 2018-02-12 17:17 星朝 阅读(2278) 评论(0) 推荐(0)
摘要:应用场景 我们希望通过缓存来减少对关系型数据库的查询次数,减轻数据库压力。在执行DAO类的select (), query ()方法时,先从Redis中查询有没有缓存数据,如果有则直接从Redis拿到结果,如果没有再向数据库发起查询请求取数据。 序列化问题 要把domain object做为key 阅读全文
posted @ 2018-02-09 11:32 星朝 阅读(2619) 评论(0) 推荐(0)
摘要:Redis 数据结构简介 Redis可以存储键与5种不同数据结构类型之间的映射,这5种数据结构类型分别为String(字符串)、List(列表)、Set(集合)、Hash(散列)和 Zset(有序集合)。 下面来对这5种数据结构类型作简单的介绍: 结构类型结构存储的值结构的读写能力 String 可 阅读全文
posted @ 2018-02-08 14:01 星朝 阅读(8473) 评论(2) 推荐(0)
摘要:Junit这种老技术,现在又拿出来说,不为别的,某种程度上来说,更是为了要说明它在项目中的重要性。 凭本人的感觉和经验来说,在项目中完全按标准都写Junit用例覆盖大部分业务代码的,应该不会超过一半。 刚好前段时间写了一些关于SpringBoot的帖子,正好现在把Junit再拿出来从几个方面再说一下 阅读全文
posted @ 2018-02-06 15:58 星朝 阅读(9666) 评论(0) 推荐(0)
摘要:一、下载windows版本的Redis 去官网找了很久,发现原来在官网上可以下载的windows版本的,现在官网以及没有下载地址,只能在github上下载,官网只提供linux版本的下载 官网下载地址:http://redis.io/download github下载地址:https://githu 阅读全文
posted @ 2018-01-24 20:58 星朝 阅读(166) 评论(0) 推荐(0)
摘要:实战操作可参考:http://www.roncoo.com/course/view/3117ffd4c74b4a51a998f9276740dcfb 一、环境 操作系统:CentOS 6.6 x86_64 bin DVD1.iso JDK版本:jdk1.7.0_45 MyCat版本:Mycat se 阅读全文
posted @ 2018-01-05 17:16 星朝 阅读(1225) 评论(0) 推荐(0)
摘要:什么是Mycat 1.Mycat就是MySQL Server,而Mycat后面连接的MySQL Server,就好象是MySQL的存储引擎,如InnoDB,MyISAM等.因此,Mycat本身并不存储数据,数据是在后端的MySQL上存储的,因此数据可靠性以及事务等都是MySQL保证的.2.Mycat 阅读全文
posted @ 2018-01-05 17:15 星朝 阅读(488) 评论(0) 推荐(0)
摘要:          上次进过GTID复制的学习记录,已经搭建好了主从复制的服务器,现在利用现有的主从复制环境,加上正在研究的Mycat,实现了主流分布式数据库的测试 Mycat就不用多介绍了,可以实现很多分布式数据库的功能,极大的减轻数据库服务器的压 阅读全文
posted @ 2018-01-05 16:33 星朝 阅读(733) 评论(0) 推荐(0)
摘要:本篇前提: mycat配置正确,且能正常启动。 1、schema.xml <table>标签: dataNode 分片节点指定(取值:dataNode中的name属性值) rule 分片规则选择(取值:rule标签中的name属性值) [root@dras test conf] vim 阅读全文
posted @ 2018-01-05 16:32 星朝 阅读(1022) 评论(0) 推荐(0)
摘要:mycat官网:http://www.mycat.org.cn/ wiki:https://github.com/MyCATApache/Mycat Server/wiki MyCat使用Mysql的通讯协议模拟成一个MySQl服务器,并建立了完整的Schema(数据库)、Table(数据表)、Us 阅读全文
posted @ 2018-01-05 16:07 星朝 阅读(1805) 评论(0) 推荐(0)
摘要:<?xml version="1.0"?> <!DOCTYPE mycat:schema SYSTEM "schema.dtd"> <mycat:schema xmlns:mycat="http://io.mycat/">       阅读全文
posted @ 2018-01-05 14:44 星朝 阅读(1095) 评论(0) 推荐(0)
摘要:一:实验环境 IP 操作系统 mysql版本号 master 192.168.25.11 CentOS7 5.6.35 slave 192.168.25.10 win10 5.7.18 slave版本需要大于等于master,否则master上的一些操作slave不支持时,会导致数据不一致。 Lin 阅读全文
posted @ 2018-01-05 13:43 星朝 阅读(228) 评论(0) 推荐(0)
摘要:利用MyCat中间件实现读写分离 需要两步: 1、搭建MySQL主从复制环境 2、配置MyCat读写分离策略 一、搭建MySQL主从环境 参考上一篇博文:MySQL系列之七:主从复制 二、配置MyCat读写分离策略 本篇只讨论MyCat读写分离,有关的配置文件schema.xml 和 server. 阅读全文
posted @ 2018-01-05 13:22 星朝 阅读(291) 评论(0) 推荐(0)
摘要:mycat是最近很火的一款国人发明的分布式数据库中间件,它是基于阿里的cobar的基础上进行开发的  搭建之前我们先要配置mysql的主从复制,这个过程很长,我这里就不写了,有兴趣的可以看看我写的这篇文章。 linux centos下mysql数据库的主从复制环境搭建 mycat在应用当中 阅读全文
posted @ 2018-01-04 17:55 星朝 阅读(291) 评论(0) 推荐(0)
摘要:在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一。为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种实现方式,实现方式主要有三种:本地文件方式、数据库方式、本地时间戳算法。 一、本地文件方式 原理:此方式MyCAT将sequence配置到文件中, 阅读全文
posted @ 2018-01-04 17:35 星朝 阅读(552) 评论(0) 推荐(0)
摘要:横空出世的MyCat截至到2015年4月,保守估计已经有超过60个项目在使用,主要应用在电信领域、互联网项目,大部分是交易和管理系统,少量是信息系统。比较大的系统中,数据规模单表单月30亿。本人也初步尝鲜,体验了一把,见以下描述,供大家参考。 MyCAT 是使用 JAVA 语言进行编写开发,使用前需 阅读全文
posted @ 2018-01-04 17:05 星朝 阅读(778) 评论(0) 推荐(0)
摘要:1 Mycat目前有哪些功能与特性? 答: • 支持 SQL 92标准 • 支持Mysql集群,可以作为Proxy使用 • 支持JDBC连接多数据库 • 支持NoSQL数据库 • 支持galera for mysql集群,percona cluster或者mariadb cluster,提供高可用性 阅读全文
posted @ 2018-01-04 16:39 星朝 阅读(6558) 评论(1) 推荐(1)

上一页 1 ··· 8 9 10 11 12 13 14 15 下一页