Boblim

2020年8月6日

摘要： 1、平衡二叉树概念平衡二叉树是基于二分法的策略提高数据的查找速度的二叉树的数据结构；特点：平衡二叉树是采用二分法思维把数据按规则组装成一个树形结构的数据，用这个树形结构的数据减少无关数据的检索，大大的提升了数据检索的速度；平衡二叉树的数据结构组装过程有以下规则：（1）非叶子节点只能允许最多阅读全文

posted @ 2020-08-06 21:56 Boblim 阅读(1549) 评论(0) 推荐(0)

为什么HashMap线程不安全

摘要：一、Map概述我们都知道HashMap是线程不安全的，但是HashMap的使用频率在所有map中确实属于比较高的。因为它可以满足我们大多数的场景了。 Map类继承图上面展示了java中Map的继承图，Map是一个接口，我们常用的实现类有HashMap、LinkedHashMap、TreeMap，阅读全文

posted @ 2020-08-06 18:04 Boblim 阅读(881) 评论(0) 推荐(0)

2020年8月5日

Hive对字段进行urlDecode

摘要：最近项目中需要对埋点日志hive表进行分析，并且按一定的规则统计出来满足要求的用户pin。本来以为是一件比较简单的事，结果在查看导出的词表时发现很多带有"%"的明显具有url encode特征的用户pin，于是就开启了这篇文章用hive对字段进行urlDecode的探索。在查看了一些资料后，刚开始阅读全文

posted @ 2020-08-05 21:12 Boblim 阅读(7370) 评论(0) 推荐(0)

-bash: !": event not found

摘要：在linux环境下执行一下代码时 printf "The first '%s,%s!' \n" Hello world 返回结果为“-bash: !”: event not found”。错误原因：使用printf打印“！”号时，感叹号位于单引号之内造成的。将“！”移至单引号之外，即可解决。在s 阅读全文

posted @ 2020-08-05 18:21 Boblim 阅读(8758) 评论(0) 推荐(0)

Hive: Reflect UDF

摘要： Reflect UDF JAVA类和方法通常用于处理用户希望在hive中使用的确切的函数。相比与封装一个UDF然后调用这个方法，这些方法主要通过反射UDF去调用。Reflect使用Java反射去实例化，并且调用对象的方法；也能够调用静态方法。这个方法必须返回一个基础类或者一个hive能序列化的类阅读全文

posted @ 2020-08-05 18:17 Boblim 阅读(711) 评论(0) 推荐(0)

HIVE常用正则函数(like、rlike、regexp、regexp_replace、regexp_extract)

摘要： Oralce中regex_like和hive的regexp对应 LIKE 语法1: A LIKE B 语法2: LIKE(A, B) 操作类型: strings 返回类型: boolean或null 描述: 如果字符串A或者字符串B为NULL，则返回NULL；如果字符串A符合表达式B的正则语法，则为阅读全文

posted @ 2020-08-05 18:11 Boblim 阅读(33118) 评论(1) 推荐(0)

URLDecoder异常解决方法

摘要： URLDecoder对参数进行解码时候，代码如： URLDecoder.decode(param,"utf-8"); 有时候会出现类似如下的错误： URLDecoder异常Illegal hex characters in escape (%) 这是因为传参有一些特殊字符，比如%号或者说+号，导致不阅读全文

posted @ 2020-08-05 18:00 Boblim 阅读(4554) 评论(0) 推荐(0)

2020年8月4日

Protobuf与Json的相互转化

摘要：前言最近的工作中开始使用Google的Protobuf构建REST API，按照现在使用的感觉，除了应为Protobuf的特性，接口被严格确定下来之外，暂时还么有感受到其他特别的好处。说是Protobuf比Json的序列化更小更快，但按照目前的需求，估计很就都没有还不会有这个性能的需要。既然是全新阅读全文

posted @ 2020-08-04 17:55 Boblim 阅读(15937) 评论(1) 推荐(1)

java int转byte数组

摘要： int 转 byte[] 低字节在前（低字节序） 1 public static byte[] toLH(int n) { 2 byte[] b = new byte[4]; 3 b[0] = (byte) (n & 0xff); 4 b[1] = (byte) (n >> 8 & 0xff); 5 阅读全文

posted @ 2020-08-04 17:35 Boblim 阅读(7858) 评论(0) 推荐(0)

2020年8月3日

Spark Streaming读取Kafka数据的两种方式

摘要： Kafka在0.8和0.10之间引入了一种新的消费者API,因此,Spark Streaming与Kafka集成,有两种包可以选择: spark-streaming-kafka-0-8与spark-streaming-kafka-0-10。在使用时应注意以下几点: spark-streaming-k 阅读全文

posted @ 2020-08-03 21:51 Boblim 阅读(2570) 评论(0) 推荐(0)

公告