随笔分类 -  java

[数据治理] - 技术 - SpringBoot
摘要：入职公司后，被分配做数据治理平台的自研工作。主要是负责数据治理平台的后台开发工作。 这篇博文主要记录一下学习到的SpringBoot知识： java基础： import java.sql.Connection;import java.sql.DriverManager;import java.sql 阅读全文
posted @ 2021-01-20 16:52 极速遁走 阅读(141) 评论(0) 推荐(0)
【大数据开发工程师】面试——Redis
摘要：是什么 开源的 key-value 存储系统，noSQL数据库。 redis的优势 数据结构、底层实现及应用场景 string：简单地 get / set 缓存。 hash：可以缓存kafka偏移量，用户资料。比如命令：hmset user1 name "lin" sex "male" age "2 阅读全文
posted @ 2021-01-05 22:45 极速遁走 阅读(119) 评论(0) 推荐(0)
【大数据开发工程师】面试——JAVA题之LinkedHashMap
摘要：LinkedHashMap继承了HashMap，但是LinkedHashMap保留了数据插入时的顺序。 阅读全文
posted @ 2021-01-04 17:08 极速遁走 阅读(98) 评论(0) 推荐(0)
flink流批一体
摘要：在大数据处理计算领域，有离线计算和实时计算两种模式。一直以来， 我们都是用mapreduce / hive / sparkSQL来处理离线场景，用 sparkStreaming / flink处理实时场景，但是这种lambda架构会导致一个问题：进行更改时要同时更改两套代码，进行同步。 flink流 阅读全文
posted @ 2021-01-04 17:07 极速遁走 阅读(1186) 评论(0) 推荐(0)
【大数据开发工程师】面试——JAVA题之HashSet
摘要：HashSet 作用：保证数据的唯一。 public class HashSet<E> extends AbstractSet<E> implements Set<E>, Cloneable, java.io.Serializable{ private transient HashMap<E,Obj 阅读全文
posted @ 2021-01-04 16:00 极速遁走 阅读(104) 评论(0) 推荐(0)
【大数据开发工程师】面试——JAVA题之理解布隆过滤器
摘要：布隆过滤器 可以看作是一个位数组，每个元素只占1bit，存的都是0或者1。 它通常用于查询某个元素是否存在，但是它是一种概率性查询，能够实现高效查询，但是又一定的误判。能够告诉你某个元素一定不存在或可能存在。 与此对比：HashMap也是用来判断某个元素是否存在的，把数据存为HashMap的key， 阅读全文
posted @ 2021-01-04 14:43 极速遁走 阅读(196) 评论(0) 推荐(0)
【大数据开发工程师】面试——JAVA题之hashMap的原理（JDK1.8）
摘要：HashTable是一种非常重要的数据结构，也叫散列表。 HashMap的原理: 数组+链表+红黑树。 用hash(值)计算所在数组的下标，hash(值)能够一次定位到数组下标，所以在不考虑哈希冲突的情况下, 查找、删除、插入操作的时间复杂度是O(1)。但在发生哈希冲突时，仍然要遍历整个链表，时间复 阅读全文
posted @ 2021-01-04 12:18 极速遁走 阅读(142) 评论(0) 推荐(0)