上一页 1 2 3 4 5 6 7 8 9 10 ··· 21 下一页
2019年12月7日
Linux 字符集的查看及修改
摘要： 一·查看字符集 字符集在系统中体现形式是一个环境变量，以CentOS6.5为例,其查看当前终端使用字符集的方式可以有以下几种方式: 第一种： [root@Testa-www tmp]# echo $LANG zh_CN.UTF-8 第二种： [root@Testa-www ~]# env |grep 阅读全文
posted @ 2019-12-07 13:36 xibuhaohao 阅读(716) 评论(0) 推荐(0) 编辑
MongoDB 红宝书-MongoDB官网使用指南
摘要： 本文转载自Mongodb中文社区：http://www.mongoing.com/archives/27359 无论你是MongoDB的使用者、爱好者、初学者还是路人甲，有一个学习与进修的资源宝藏是千万不可浪费的，那就是MongoDB官方网站。 进入网站首页后，会看到顶端简洁明了的导航栏： 产品：包 阅读全文
posted @ 2019-12-07 11:43 xibuhaohao 阅读(271) 评论(0) 推荐(0) 编辑
Linux grep 查找字符所在文件（grep详解）
摘要： 查找字符所在文件 grep -ir "S_ROLE" ./* -i 不区分大小写 -r 查找字符出处 -a --text #不要忽略二进制的数据。 -A<显示行数> --after-context=<显示行数> #除了显示符合范本样式的那一列之外，并显示该行之后的内容。 -b --byte-offs 阅读全文
posted @ 2019-12-07 11:12 xibuhaohao 阅读(4162) 评论(0) 推荐(0) 编辑
Linux 镜像下载
摘要： 1、官网下载 https://www.centos.org/download/ 第一个是默认当前版本 第二个是选择其他版本 二、其他渠道下载 http://mirrors.163.com/ 阅读全文
posted @ 2019-12-07 10:04 xibuhaohao 阅读(8445) 评论(0) 推荐(0) 编辑
2019年12月3日
你公司到底需不需要引入实时计算引擎？（转载）
摘要： 大数据发展至今，数据呈指数倍的增长，对实效性的要求也越来越高，于是像上面这种需求也变得越来越多了。 那这些场景对应着什么业务需求呢？我们来总结下，大概如下： 初看这些需求，是不是感觉很难？ 那么我们接下来来分析一下该怎么去实现？ 从这些需求来看，最根本的业务都是需要实时查看数据信息，那么首先我们得想 阅读全文
posted @ 2019-12-03 15:37 xibuhaohao 阅读(431) 评论(0) 推荐(0) 编辑
基于Kafka的实时计算引擎如何选择？（转载）
摘要： 1.前言 目前实时计算的业务场景越来越多，实时计算引擎技术及生态也越来越成熟。以Flink和Spark为首的实时计算引擎，成为实时计算场景的重点考虑对象。那么，今天就来聊一聊基于Kafka的实时计算引擎如何选择？Flink or Spark？ 2.为何需要实时计算？ 根据IBM的统计报告显示，过去两 阅读全文
posted @ 2019-12-03 15:20 xibuhaohao 阅读(435) 评论(0) 推荐(0) 编辑
MySQL 为什么不用分区表（转载）
摘要： 一分钟系列 潜在场景如何？ 当MySQL单表的数据量过大时，数据库的访问速度会下降，“数据量大”问题的常见解决方案是“水平切分”。 MySQL常见的水平切分方案有哪些？ （1）分库分表； （2）分区表。 画外音：我C，没听过分区表，有朋友惊叹。 什么是分库分表？ 把一个很大的库（表）的数据分到几个库 阅读全文
posted @ 2019-12-03 14:43 xibuhaohao 阅读(967) 评论(0) 推荐(0) 编辑
HBase 基本入门篇
摘要： 无论是 NoSQL，还是大数据领域，HBase 都是非常”炙热”的一门数据库。本文将对 HBase 做一些基础性的介绍，旨在入门。 一、简介 HBase 是一个开源的、面向列的非关系型分布式数据库，目前是Hadoop体系中非常关键的一部分。在最初，HBase是基于谷歌的 BigTable 原型实现的 阅读全文
posted @ 2019-12-03 10:56 xibuhaohao 阅读(878) 评论(0) 推荐(0) 编辑
2019年12月2日
linux 出错 “INFO: task java: xxx blocked for more than 120 seconds.” 的3种解决方案
摘要： 1 问题描述 最近搭建的一个linux最小系统在运行到241秒时在控制台自动打印如下图信息，并且以后每隔120秒打印一次。 仔细阅读打印信息发现关键信息是“hung_task_timeout_secs”，第一次遇到这样的问题，首先百度… 通过翻看多个网友的博客，发现这是linux kernel的一个 阅读全文
posted @ 2019-12-02 17:58 xibuhaohao 阅读(1611) 评论(0) 推荐(0) 编辑
2019年11月29日
Oracle 查看index是否失效
摘要： 一、普通索引是否失效 select * from dba_indexes s where s.owner in ('ISMP','BOSS','PAY','ACCOUNT','SETTLE','TEMP_DSF') and s.status!='VALID'; 二、分区索引状态select * fr 阅读全文
posted @ 2019-11-29 15:15 xibuhaohao 阅读(2923) 评论(0) 推荐(0) 编辑
2019年11月28日
MongoDB 4.2 新特性解读 （转载）
摘要： MongoDB World 2019 上发布新版本 MongoDB 4.2 Beta，包含多项数据库新特性，本文尝试从技术角度解读。 Full Text Search MongoDB 4.2 之前，全文搜索（Full Text Search）的能力是靠 Text Index 来支持的，在 Mongo 阅读全文
posted @ 2019-11-28 17:57 xibuhaohao 阅读(479) 评论(0) 推荐(0) 编辑
简单概括下MongoDB 4.0 新特性
摘要： 4.0 版本 （1）跨文档事务支持 （ACID） 首个支持跨文档事务的NoSQL云数据库，将文档模型的速度，灵活性和功能与ACID保证相结合。现在，使用MongoDB解决各种用例变得更加容易。 （4.0 的事务存在最大修改 16MB、事务执行时间不能过长的限制） （2）40%迁移速度提升 并发的读取 阅读全文
posted @ 2019-11-28 17:55 xibuhaohao 阅读(661) 评论(0) 推荐(0) 编辑
MongoDB 4.2 的主要亮点（转载）
摘要： 在6月份召开的MongoDB全球用户大会上， MongoDB官宣了MongoDB Server 4.2，在经过100,000多个运行实例的测试后，MongoDB 4.2表现强劲。现在4.2版本正式上线，并为生产环境的部署做好了准备。 “MongoDB 4.2经受了100,000多个运行实例的考验，表 阅读全文
posted @ 2019-11-28 17:54 xibuhaohao 阅读(559) 评论(0) 推荐(0) 编辑
Redis 高可用架构设计（转载）
摘要： 转载自：https://mp.weixin.qq.com/s?__biz=MzA3NDcyMTQyNQ==&mid=2649263292&idx=1&sn=b1703906840e177f854f543ca68e0f00&chksm=87675d42b010d454fed8ddcaa27a2f0a9 阅读全文
posted @ 2019-11-28 14:17 xibuhaohao 阅读(289) 评论(0) 推荐(0) 编辑
Oracle 分区默认segment大小变化(64k—>8M)
摘要： 原文链接：http://www.cnblogs.com/wcwen1990/p/6656545.html _partition_large_extents和_index_partition_large_extents alter system set "_partition_large_extent 阅读全文
posted @ 2019-11-28 11:21 xibuhaohao 阅读(1226) 评论(0) 推荐(0) 编辑
Oracle 对比insert和delete操作产生的undo
摘要： 版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。 本文链接：https://blog.csdn.net/wangqingxun/article/details/42098131 测试目标：对比insert和delete产生的undo数量的多少 阅读全文
posted @ 2019-11-28 09:52 xibuhaohao 阅读(780) 评论(0) 推荐(0) 编辑
MySQL 详细解读undo log ：insert undo,update undo
摘要： 转自aobao.org/monthly/2015/04/01/ 本文是对整个Undo生命周期过程的阐述，代码分析基于当前最新的MySQL5.7版本。本文也可以作为了解整个Undo模块的代码导读。由于涉及到的模块众多，因此部分细节并未深入。 前言 Undo log是InnoDB MVCC事务特性的重要 阅读全文
posted @ 2019-11-28 09:46 xibuhaohao 阅读(2903) 评论(0) 推荐(0) 编辑
什么是关系型数据库？
摘要： 百度百科给的定义： 关系型数据库，是指采用了关系模型来组织数据的数据库，其以行和列的形式存储数据，以便于用户理解，关系型数据库这一系列的行和列被称为表，一组表组成了数据库。用户通过查询来检索数据库中的数据，而查询是一个用于限定数据库中某些区域的执行代码。关系模型可以简单理解为二维表格模型，而一个关系 阅读全文
posted @ 2019-11-28 09:31 xibuhaohao 阅读(1336) 评论(0) 推荐(0) 编辑
2019年11月27日
Greenplum 常用数据库管理语句,sql工具
摘要： 转载自：https://blog.csdn.net/you_xian/article/details/78549756作者：lianghc 在greenplum 使用过程中积累的一些常用查询语句，整理出来备忘。欢迎各位留言补充。都是SQL命令以及数据字典的使用。熟悉数据字典非常重要。三个重要的sch 阅读全文
posted @ 2019-11-27 17:32 xibuhaohao 阅读(832) 评论(0) 推荐(0) 编辑
Greenplum常用的gp_toolkit & pg_catalog监控语句
摘要： gp_toolkit 说明 Greenplum数据库提供了一个名为gp_tooikit的管理schema,该schema下有关于查询系统目录,日志文件, 用户创建(databases,schema,table,indexs,view,function)等信息,也可以查询资源队列,表的膨胀表,表的倾斜 阅读全文
posted @ 2019-11-27 16:35 xibuhaohao 阅读(1355) 评论(0) 推荐(1) 编辑
Greenplum 与 PostgreSQL 修改元数据(catalog)的方法 allow_system_table_mods
摘要： 背景 PostgreSQL大量的信息保存在元数据中，所有的元数据都是内部维护的，例如建表、建索引、删表等操作，自动维护元数据。 在某些迫不得已的情况下才可能需要直接对元数据进行修改。 默认情况下，用户是允许修改元数据的。 postgres=# \set VERBOSITY verbose postg 阅读全文
posted @ 2019-11-27 16:08 xibuhaohao 阅读(1569) 评论(0) 推荐(0) 编辑
Greenplum 6 新功能 在线扩容工具GPExpand （转载）
摘要： Gpexpand是Greenplum数据库的扩容工具，可以为集群增加新节点从而可以存储更多的数据，提供更高的计算能力。Greenplum 5及之前，集群扩容需要停机增加新节点，然后对表数据做重分布。因为集群大小已经改变，所以重分布之前要先将所有哈希分布表改成随机分布，然后再按照新的集群大小重新计算哈 阅读全文
posted @ 2019-11-27 11:12 xibuhaohao 阅读(464) 评论(0) 推荐(0) 编辑
Pivotal Greenplum 6.0 新特性介绍
摘要： Pivotal Greenplum 6.0 新特性介绍 在1月12日举办的Greenplum开源有道智数未来技术研讨会上，Pivotal中国研发中心Greenplum 产品经理李阳向大家介绍了Pivotal Greenplum 6.0 新特性。 Greenplum是Pivotal公司投入研发十多年， 阅读全文
posted @ 2019-11-27 11:10 xibuhaohao 阅读(587) 评论(0) 推荐(0) 编辑
2019年11月25日
数据库 Hash Join的定义，原理，算法，成本，模式和位图
摘要： Hash Join只能用于相等连接，且只能在CBO优化器模式下。相对于nested loop join，hash join更适合处理大型结果集 Hash Join的执行计划第1个是hash表(build table)，第2个探查表(probe table)，一般不叫内外表，nested loop才有 阅读全文
posted @ 2019-11-25 17:07 xibuhaohao 阅读(1252) 评论(0) 推荐(0) 编辑
2019年11月22日
Mycat 全局系列号（转载）
摘要： 概述 本篇文章介绍mycat怎样在分库分表的情况下保证主键的全局唯一方法，接下来就来分析三种方法各自的优缺点。 配置 文件方式获取 1.修改server配置文件 vim server.xml <system><property name="sequnceHandlerType">0</propert 阅读全文
posted @ 2019-11-22 16:56 xibuhaohao 阅读(271) 评论(0) 推荐(0) 编辑
MySQL 分库分表 dble简单使用
摘要： 一、运行环境 Host Name IP DB Mod data0 172.16.100.170 mysql data1 172.16.100.171 mysql data2 172.16.100.172 mysql 二、安装dble 1、上传安装dble 需要Java环境，1.8及以上版本 直接解压 阅读全文
posted @ 2019-11-22 14:24 xibuhaohao 阅读(1124) 评论(0) 推荐(0) 编辑
2019年11月21日
MySQL 中间件 - DBLE 简单使用
摘要： DBLE 是企业级开源分布式中间件，江湖人送外号 “MyCat Plus”；以其简单稳定，持续维护，良好的社区环境和广大的群众基础得到了社区的大力支持； 环境准备 DBLE项目资料 DBLE官方网站：https://opensource.actionsky.com 可以详细了解DBLE的背景和应用场 阅读全文
posted @ 2019-11-21 18:10 xibuhaohao 阅读(1618) 评论(0) 推荐(0) 编辑
CentOS yum repo
摘要： CentOS yum repo 官方arm版本 http://debuginfo.centos.org/7/aarch64/ 阿里云的 一个是Centos-6的 一个是Centos-7 # CentOS 5 wget -O /etc/yum.repos.d/CentOS-Base.repo http 阅读全文
posted @ 2019-11-21 15:08 xibuhaohao 阅读(356) 评论(0) 推荐(0) 编辑
MySQL 已有大数据量表进行分区踩坑
摘要： 一、背景mysql 表中已有 4 亿数据，为提高查询效率，需创建分区，一开始计划是创建 HASH 分区，结果报错：ERROR 1659 (HY000): Field 'partno' is of a not allowed type for this type of partitioning1 查询 阅读全文
posted @ 2019-11-21 08:52 xibuhaohao 阅读(3267) 评论(0) 推荐(0) 编辑
2019年11月20日
Greenplum 资源队列（转载）
摘要： 1、创建资源队列语法 Command: CREATE RESOURCE QUEUEDescription: create a new resource queue for workload managementSyntax:CREATE RESOURCE QUEUE name WITH (queue 阅读全文
posted @ 2019-11-20 16:23 xibuhaohao 阅读(797) 评论(0) 推荐(0) 编辑
MySQL 开启慢查询日志与普通日志
摘要： 一、开启满查询日志 1、查看慢查询日志 SHOW VARIABLES LIKE '%slow%'; 2、开启慢查询日志 set GLOBAL slow_query_log =on; 3、设置慢查询日志保存文件与路径 set GLOBAL slow_query_log_file='/tmp/mysql 阅读全文
posted @ 2019-11-20 15:03 xibuhaohao 阅读(206) 评论(0) 推荐(0) 编辑
Oracle iops测试
摘要： DECLARE lat INTEGER; iops INTEGER; mbps INTEGER;BEGIN DBMS_RESOURCE_MANAGER.CALIBRATE_IO(4, 10, iops, mbps, lat); DBMS_OUTPUT.PUT_LINE('max_iops = ' | 阅读全文
posted @ 2019-11-20 10:42 xibuhaohao 阅读(726) 评论(0) 推荐(0) 编辑
2019年11月19日
Impala内存优化（转载）
摘要： 一. 引言 Hadoop生态中的NoSQL数据分析三剑客Hive、HBase、Impala分别在海量批处理分析、大数据列式存储、实时交互式分析各有所长。尤其是Impala，自从加入Hadoop大家庭以来，凭借其各个特点鲜明的优点博取了广大大数据分析人员的欢心。 Impala通过主节点生成执行计划树并 阅读全文
posted @ 2019-11-19 14:15 xibuhaohao 阅读(1145) 评论(0) 推荐(0) 编辑
Impala 介绍（转载）
摘要： 一、简介 1、概述 Impala是Cloudera公司推出，提供对HDFS、Hbase数据的高性能、低延迟的交互式SQL查询功能。 •基于Hive使用内存计算，兼顾数据仓库、具有实时、批处理、多并发等优点 impala使用hive的元数据, 完全在内存中计算 •是CDH平台首选的PB级大数据实时查询 阅读全文
posted @ 2019-11-19 13:55 xibuhaohao 阅读(292) 评论(0) 推荐(0) 编辑
2019年11月18日
MySQL 硬链接删除大表
摘要： 在清理整个大表时，我们推荐使用drop，而非delete。但是如果表实在太大，即使是drop，也需要消耗一定的时间。这时可以利用linux的硬连接来快速删除大表，操作过程如下：有一个大表test，共有4194304行数据，表空间文件大小为1.3Gmysql> select count(*) from 阅读全文
posted @ 2019-11-18 10:23 xibuhaohao 阅读(1002) 评论(0) 推荐(0) 编辑
看图轻松理解数据结构与算法系列(NoSQL存储-LSM树) - 全文
摘要： 《看图轻松理解数据结构和算法》，主要使用图片来描述常见的数据结构和算法，轻松阅读并理解掌握。本系列包括各种堆、各种队列、各种列表、各种树、各种图、各种排序等等几十篇的样子。 关于LSM树 LSM树，即日志结构合并树(Log-Structured Merge-Tree)。其实它并不属于一个具体的数据结 阅读全文
posted @ 2019-11-18 09:40 xibuhaohao 阅读(334) 评论(0) 推荐(0) 编辑
HBASE-LSM树（转载）
摘要： HBASE-LSM树 1.B+树 关于B树、B+树、B树的了解参考：* http://blog.csdn.net/v_july_v/article/details/6530142 优点： 走进搜索引擎的作者梁斌老师针对B树、B+树给出了他的意见（为了真实性，特引用其原话，未作任何改动）： “B+树还 阅读全文
posted @ 2019-11-18 09:39 xibuhaohao 阅读(326) 评论(0) 推荐(0) 编辑
NoSql数据库使用半年后在设计上面的一些心得 （转载）
摘要： NoSql数据库这个概念听闻许久了，也陆续看到很多公司和产品都在使用，优缺点似乎都被分析的清清楚楚。但我心里一直存有一个疑惑，它的出现究竟是为了解决什么问题？ 这个疑惑非常大，为此我看了很多分析文章，但却总感觉是隔靴搔痒。为了一探究竟，半年前我决定用Mongodb这个著名的NoSql数据库做个产品试 阅读全文
posted @ 2019-11-18 09:14 xibuhaohao 阅读(454) 评论(0) 推荐(0) 编辑
2019年11月15日
Linux shell if [ ]
摘要： [ -a FILE ] 如果 FILE 存在则为真。 [ -b FILE ] 如果 FILE 存在且是一个块特殊文件则为真。 [ -c FILE ] 如果 FILE 存在且是一个字特殊文件则为真。 [ -d FILE ] 如果 FILE 存在且是一个目录则为真。 [ -e FILE ] 如果 FIL 阅读全文
posted @ 2019-11-15 16:12 xibuhaohao 阅读(156) 评论(0) 推荐(0) 编辑
MySQL 锁查询
摘要： 一、从视图查看 查看进程SHOW PROCESSLIST; // 查看是否锁表 SHOW OPEN TABLES WHERE In_use > 0; 1、查看当前的事务 SELECT * FROM INFORMATION_SCHEMA.INNODB_TRX; 2、查看当前锁定的事务 SELECT * 阅读全文
posted @ 2019-11-15 15:56 xibuhaohao 阅读(455) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 9 10 ··· 21 下一页