摘要：
类似flume, 但功能更为强大 Filebeat是一个日志文件托运工具，在你的服务器上安装客户端后，filebeat会监控日志目录或者指定的日志文件，追踪读取这些文件（追踪文件的变化，不停的读），并且转发这些信息到elasticsearch或者logstarsh中存放。 当你开启filebeat程 阅读全文
posted @ 2017-08-22 12:29
bronk
阅读(606)
评论(0)
推荐(0)
摘要：
hadoop的生态系统 1, hbase简介 高可用; 多备份, 分布式 高性能: 比mapreduce的性能高出许多 面向列: 存储模式是列族和列的存储模型 可伸缩: 集群可伸缩性 实时读写: 可毫秒级的响应, 可做在线数据库使用 半结构化: 通过flume导入的都是半结构化的数据 2, hbas 阅读全文
posted @ 2017-08-20 00:17
bronk
阅读(2249)
评论(0)
推荐(0)
摘要：
内置函数: 函数分类: 内置函数查看: 查看函数描述: 具体见: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1, 简单函数( 函数的计算粒度为单条记录) 关系运算 数学运算 逻辑运算 数值计算 类型转换 日 阅读全文
posted @ 2017-08-19 16:07
bronk
阅读(646)
评论(0)
推荐(0)
摘要：
1, 首先去官网看下地址是否变化了 2, 然后输入以下命令即可 3, 要是仍然嫌麻烦, 就用yum -y install 安装, 但仍然需要配置环境变量 阅读全文
posted @ 2017-08-18 13:16
bronk
阅读(1248)
评论(0)
推荐(0)
摘要：
hive 可以 类似jdbc链接, 但启动的必须是hiveserver2, 才可以使用 hiveserver2 默认监听 10000 端口 1, 启动: 重定向输出, 不干扰shell界面 nohup 用户退出, 也可以继续执行 或者 2, 使用 Beeline 进行连接 使用beeline链接, 阅读全文
posted @ 2017-08-17 19:39
bronk
阅读(363)
评论(0)
推荐(0)
摘要：
上个博客: http://www.cnblogs.com/wenbronk/p/7381252.html中, 实现了经典5表对用户进行权限的控制, 但太过于繁琐了, 官方推荐的方式是将用户和角色存储数据库, 权限直接在要访问的接口上进行控制 (我感觉更麻烦...每个接口都需要指定) 本篇基于第一个, 阅读全文
posted @ 2017-08-17 17:28
bronk
阅读(9655)
评论(0)
推荐(0)
摘要：
本博客基于上一个 http://www.cnblogs.com/wenbronk/p/7379865.html 增加了角色的权限表, 可以进行权限校验 一, 数据准备 1, 数据表建立 2, 导入数据 3, mybatis实体, 其余2个和上一篇博客一样 SysPermission.groovy 4 阅读全文
posted @ 2017-08-17 15:12
bronk
阅读(3508)
评论(0)
推荐(0)
摘要：
spring security 使用众多的拦截器实现权限控制的, 其核心有2个重要的概念: 认证(Authentication) 和授权 (Authorization)), 认证就是确认用户可以访问当前系统, 授权即确定用户有相应的权限, 现在先大概过一遍整个流程，用户登陆，会被Authentica 阅读全文
posted @ 2017-08-17 13:13
bronk
阅读(3726)
评论(0)
推荐(0)
摘要：
原生jdbc链接一般分为7步, 来获取链接并执行sql语句 1, 准备4大参数 2, 注册驱动 3, 获取链接 4, 执行sql语句 5, 获取结果集 6, 结果集处理 7, 关闭连接 阅读全文
posted @ 2017-08-16 22:30
bronk
阅读(675)
评论(0)
推荐(0)
摘要：
跟mysql类似, hive也有 DDL, 和 DML操作 数据类型: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL primitive_type为基本类型, 包括: DDL: 基本语法: 1, 使用简单数据类 阅读全文
posted @ 2017-08-15 20:32
bronk
阅读(444)
评论(0)
推荐(0)
浙公网安备 33010602011771号