摘要: 项目数据库集群出现了大规模节点宕机问题。经查询,问题在于几张表被锁。主要问题在于近期得几个项目在数据库SQL编写时大量使用了标量子查询。 为确定为题确实是由于数据表访问量超过单节点限制,做了一些测试。 数据库集群环境为:Gbase 8a 资料查询情况总结如下: 标量子查询是一个非常恐怖的用法。 当外 阅读全文
posted @ 2018-12-11 22:14 乀崋 阅读(270) 评论(0) 推荐(0) 编辑
摘要: HBase 的安装有两种方式:单机安装和分布式安装。HBase的单机安装了解即可,大家重点掌握HBase 分布式集群的安装。下面我们分别进行介绍。 HBase 单机安装 HBase 需要运行在 Hadoop 基础之上,因此安装HBase 的前提是必须安装 Hadoop 环境。我的环境安装的是hado 阅读全文
posted @ 2018-11-30 23:47 乀崋 阅读(924) 评论(0) 推荐(0) 编辑
摘要: 1、基础环境配置 NameNode、ResourceManager、SecondaryNameNode、 DataNode、NodeManager 1.1、关闭防火墙和SELinux 1.1.1、关闭防火墙 1.1.2、关闭SELinux 注:以上操作需要使用root用户 1.2、hosts配置 注 阅读全文
posted @ 2018-11-28 10:28 乀崋 阅读(1019) 评论(0) 推荐(0) 编辑
摘要: linux安装mysql服务分两种安装方法: 1、源码安装,优点是安装包比较小,只有十多M,缺点是安装依赖的库多,安装编译时间长,安装步骤复杂容易出错。 2、使用官方编译好的二进制文件安装,优点是安装速度快,安装步骤简单,缺点是安装包很大,376M左右。我这里官方编译好的Linux二进制包安装mys 阅读全文
posted @ 2018-11-25 13:28 乀崋 阅读(911) 评论(0) 推荐(0) 编辑
摘要: 学习连接:http://www.runoob.com/redis/redis-tutorial.html 一、Redis介绍 Redis是NoSql的一种。 NoSql,全名:Not Only Sql,是一种非关系型数据库,它不能替代关系弄数据库,只是关系型数据库的一个补充,是可以解决高并发、高可用 阅读全文
posted @ 2018-11-24 21:27 乀崋 阅读(5324) 评论(2) 推荐(1) 编辑
摘要: 一、java 开发环境的搭建 在windows 环境下怎么配置环境。 1.首先安装JDK java的sdk简称JDK ,去其官方网站下载JDK。 https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-21331 阅读全文
posted @ 2018-11-16 22:43 乀崋 阅读(468) 评论(0) 推荐(0) 编辑
摘要: 以前都是在自己电脑的上创建多套虚拟机,现在买了薄本,搭建不了虚拟机,更不要说搭建多台。一直想搭建轻量级的虚拟机,但是VirtualBox、Virtual PC等都试过了,要么windows家庭版不支持,要么就是搭建起来笔记本吃不消。 想到了阿里云服务器,但是发现仍旧太贵了,哈哈。 我自己有台台式机, 阅读全文
posted @ 2018-11-16 21:14 乀崋 阅读(255) 评论(0) 推荐(0) 编辑
摘要: 大数据总体架构 、知识图谱总体架构、NLP总体架构 阅读全文
posted @ 2018-11-15 11:16 乀崋 阅读(3476) 评论(0) 推荐(0) 编辑
摘要: 转载自:https://blog.csdn.net/wen_demon/article/details/44155639 1. INFORMATICA CLIENT的使用1.1 Repository Manager 的使用1.1.1 创建Repository。前提: a. 在ODBC数据源管理器中新 阅读全文
posted @ 2018-11-15 08:21 乀崋 阅读(1910) 评论(0) 推荐(0) 编辑
摘要: 一、企业级数据中心应用推广中的弊端 1.电网企业数据中心建设多厂商、多技术形态,导致不同的各类数据分散,难以有统一的操作平台,gbase、SG-RDB(Mysql)、Hadoop、Informatica、等等。 2.企业数据中心建成后,支撑各业务部门开展大数据分析应用建设,每一个业务部门背后都有其固 阅读全文
posted @ 2018-11-14 21:13 乀崋 阅读(311) 评论(0) 推荐(0) 编辑