2018年11月1日

Hive中binary类型

摘要： Hive中Binary类型于0.8版本以上开始支持。对应Java中的byte[]类型，Java中写入和读取binary类型是通过Hadoop的封装类 BytesWritable来操作的。之前写Hive的自定义UDF时，需要对Binary类型的数据做反序列化，发现一直报方法类型不匹配，之前用的byte 阅读全文

posted @ 2018-11-01 10:16 Code47 阅读(6411) 评论(1) 推荐(1)

2017年8月31日

linux下安装ffmpeg

摘要： 1、官网下载 : http://ffmpeg.org/download.html 2、解压 .tar.bz2包 tar -jxvf xx.tar.bz2 3、因为官网只提供源码，所以需要进行编译进入ffmpeg目录下 ./configure --enable-shared --disable-ya 阅读全文

posted @ 2017-08-31 11:46 Code47 阅读(923) 评论(0) 推荐(0)

2017年2月23日

HBase

摘要：一、 1. HBase - Hadoop Database是一个高可靠性(数据存在HDFS上，HDFS本身高可靠；依赖zookeeper，服务不会停)、高性能(基于Row Key，大数据量情况下速度快)、面向列(一个个单元格)、可伸缩(集群动态扩展节点)、实时读写的分布式数据库。 2. 利用HDFS 阅读全文

posted @ 2017-02-23 18:42 Code47 阅读(119) 评论(0) 推荐(0)

2017年2月22日

hadoop

摘要： Hadoop：思想之源来自Google的三篇文章 GFS Map-Reduce Bigtable。包括:分布式存储系统(HDFS)、分布式计算系统(MapReduce)。 HDFS: 一、优点: 1、高容错性 2、适合批处理 3、适合大数据 4、可构建在廉价机器上二、缺点: 1、不适合低延时数据阅读全文

posted @ 2017-02-22 18:26 Code47 阅读(93) 评论(0) 推荐(0)

Hive

摘要：基于hadoop的一个数据仓库工具。所谓数据仓库:是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它是单个数据存储，出于分析性报告和决策支持目的而创建。为需要业务智能的企业，提供指导业务流程改进、监视时间、成本、质量以及控制。用来做查询分析的数据库。基本不用做插入、修改、删除。阅读全文

posted @ 2017-02-22 17:04 Code47 阅读(112) 评论(0) 推荐(0)

linux常用命令

摘要： 1、系统运行Java jar包： java -classpath *.jar +main函数类 2、chmod -R 777 file R向下递归 ; chmod -R a=rwx file a所有用户权限 g组权限 u用户权限 o不同组其他用户权限读写操作权限都;chmod -R a+rwx f 阅读全文

posted @ 2017-02-22 15:10 Code47 阅读(106) 评论(0) 推荐(0)

2016年10月14日

ajax同源策略问题

摘要： ajax请求时，经常出现跨域问题，解决方案一: Tomcat-conf/web.xml添加Access-Control-Allow-Origin <filter> <filter-name>CorsFilter</filter-name> <filter-class>org.apache.catal 阅读全文

posted @ 2016-10-14 10:00 Code47 阅读(197) 评论(0) 推荐(0)

2016年10月13日

设计模式--代理模式

摘要：代理模式由三部分组成：委托类，代理类，抽象类。委托类、代理类都实现了抽象类。静态代理：点到点首先，(ProxyTestDaoImpl 实现抽象类) (ProxyTestDaoProxyImpl 实现抽象类) 这样准备工作已完成，只需要委托类委托代理类实现具体方法。动态代理：面到面 JDK P 阅读全文