XIAO的博客

lucene教程简介

摘要： 1 lucene简介 1.1 什么是lucene Lucene是一个全文搜索框架，而不是应用产品。因此它并不像www.baidu.com 或者google Desktop那么拿来就能用，它只是提供了一种工具让你能实现这些产品。 2 lucene的工作方式 lucene提供的服务实际包含两部分：一入一阅读全文

posted @ 2016-10-17 14:29 XIAO的博客阅读(1117) 评论(0) 推荐(0)

为CDH 5.7集群添加Kerberos身份验证及Sentry权限控制

摘要：转载请注明出处：http://www.cnblogs.com/xiaodf/ 4. 为CDH 5集群添加Kerberos身份验证 4.1 安装sentry1、点击“操作”，“添加服务”；2、选择sentry，并“继续”； 3、选择一组依赖关系 4、确认新服务的主机分配 5、配置存储数据库；在mys 阅读全文

posted @ 2016-10-17 14:28 XIAO的博客阅读(15136) 评论(2) 推荐(1)

cdh5.7权限测试示例

摘要：转载请注明出处：http://www.cnblogs.com/xiaodf/ 本文旨在展示CDH基于Kerberos身份认证和基于Sentry的权限控制功能的测试示例。 1. 准备测试数据 2. 创建用户2.1. 创建系统用户在集群所有节点创建系统用户并设置密码 2.2. 创建kerberos用户阅读全文

posted @ 2016-10-17 00:08 XIAO的博客阅读(7938) 评论(1) 推荐(0)

Kerberos安装及使用

摘要：转载请注明出处：http://www.cnblogs.com/xiaodf/ 2. 安装 Kerberos2.1. 环境配置安装kerberos前，要确保主机名可以被解析。主机名内网IP 角色 Vmw201 172.16.18.201 Master KDC Vmw202 172.16.18.2 阅读全文

posted @ 2016-10-16 23:19 XIAO的博客阅读(51596) 评论(4) 推荐(4)

Kerberos认证原理简介

摘要： 1.1 What is Kerberos 1.1.1 简单介绍 Kerberos是一个用于鉴定身份（authentication）的协议，它采取对称密钥加密（symmetric-key cryptography），这意味着密钥不会在网络上传输。在Kerberos中，未加密的密码（unencrypt 阅读全文

posted @ 2016-10-16 22:52 XIAO的博客阅读(7152) 评论(0) 推荐(0)

阿里 RocketMQ 安装与简介

摘要：一、简介官方简介： l RocketMQ是一款分布式、队列模型的消息中间件，具有以下特点： l 能够保证严格的消息顺序 l 提供丰富的消息拉取模式 l 高效的订阅者水平扩展能力 l 实时的消息订阅机制 l 亿级消息堆积能力二、网络架构三、特性 1. nameserver 相对来说，namese 阅读全文

posted @ 2015-12-25 11:08 XIAO的博客阅读(45317) 评论(0) 推荐(8)

flume+kafka+smart数据接入实施手册

摘要： 1. 概述本手册主要介绍了，一个将传统数据接入到Hadoop集群的数据接入方案和实施方法。供数据接入和集群运维人员参考。 1.1. 整体方案 Flume作为日志收集工具，监控一个文件目录或者一个文件，当有新数据加入时，收集新数据发送给Kafka。Kafka用来做数据缓存和消息订阅。Kafka里面的阅读全文

posted @ 2015-10-13 11:01 XIAO的博客阅读(1976) 评论(0) 推荐(0)

线性函数拟合R语言示例

摘要：线性函数拟合（y=a+bx） 1. R运行实例 R语言运行代码如下：绿色为要提供的数据，黄色标识信息为需要保存的。 x<-c(0.10,0.11, 0.12, 0.13, 0.14, 0.15,0.16, 0.17, 0.18, 0.20, 0.21, 0.23) y<-c(42.0,43.5, 4 阅读全文

posted @ 2015-10-13 10:45 XIAO的博客阅读(4684) 评论(0) 推荐(0)

分布式消息队列kafka系列介绍 — 核心API介绍及实例

摘要：原文地址：http://www.inter12.org/archives/834 一 PRODUCER的API 1.Producer的创建，依赖于ProducerConfig public Producer(ProducerConfig config); 2.单个或是批量的消息发送 public v 阅读全文

posted @ 2015-07-21 10:55 XIAO的博客阅读(1146) 评论(0) 推荐(0)

将文件从一台linux机器拷贝到多台的方法

摘要：首先你所操作的各台linux机器间必须设置了ssh免密码登录，具体方法可上网查看。将文件从一台linux机器拷贝到多台分为以下几个步骤：第一步：创建脚本文件remotecopy.sh 第二步：创建主机列表文件hosts 第三步：在传输文件所在节点上运行脚本命令阅读全文

posted @ 2015-07-17 10:57 XIAO的博客阅读(2478) 评论(0) 推荐(0)

公告

导航