摘要:1.简介 Redis中的每个Key-Value在内存中都会被划分成DictEntry、RedisObject以及具体对象,其中DictEntry又分别包含指向Key和Value的指针(以RedisObject的形式)以及指向下一个DictEntry的指针。 Key固定是字符串,因此使用字符串对象来进 阅读全文
posted @ 2019-09-05 11:13 辣鸡小篮子 阅读 (402) 评论 (1) 编辑
摘要:1.简介 Nginx是一个反向代理服务器,其启动速度极快、占用内存极少、抗高并发能力强,因此大量在互联网项目中应用。 Nginx访问速度快的原因: 1.动静分离,静态资源由Nginx直接进行管理,动态请求转发到后端。 2.Worker中的线程是AIO的(异步非阻塞),当接收到一个请求后将其放入到队列 阅读全文
posted @ 2019-05-15 17:06 辣鸡小篮子 阅读 (186) 评论 (0) 编辑
摘要:1.简介 Redis在生产环境中一般是通过集群的方式进行运行,Redis集群包括主从复制集群和数据分片集群两种类型。 *主从复制集群提供高可用性,而数据分片集群提供负载均衡。 *数据分片集群中能实现主从复制集群的功能。 2.Redis主从复制集群 主从复制集群中由Master节点提供读写服务,Sla 阅读全文
posted @ 2019-04-19 16:52 辣鸡小篮子 阅读 (452) 评论 (0) 编辑
摘要:1.简介 Redis是一个基于内存的Key-Value非关系型数据库,由C语言进行编写。 Redis一般作为分布式缓存框架、分布式下的SESSION分离、分布式锁的实现等等。 Redis速度快的原因:基于内存、单线程、多路复用。 2.Redis数据类型 Redis中提供了七种数据类型,分别是Stri 阅读全文
posted @ 2019-04-18 16:42 辣鸡小篮子 阅读 (577) 评论 (2) 编辑
摘要:1.简介 使用线程池可以避免线程的频繁创建以及销毁。 JAVA中提供的用于实现线程池的API: Executor、ExecutorService、AbstractExecutorService、ThreadPoolExecutor、ForkJoinPool都位于java.util.concurren 阅读全文
posted @ 2019-03-14 19:04 辣鸡小篮子 阅读 (384) 评论 (0) 编辑
摘要:1.简介 Phoenix是一个HBase框架,可以通过SQL的方式来操作HBase。 Phoenix是构建在HBase上的一个SQL层,是内嵌在HBase中的JDBC驱动,能够让用户使用标准的JDBC来操作HBase。 Phoenix使用JAVA语言进行编写,其查询引擎会将SQL查询语句转换成一个或 阅读全文
posted @ 2019-01-11 18:30 辣鸡小篮子 阅读 (518) 评论 (0) 编辑
摘要:1.简介 HBase是一个基于HDFS的、分布式的、面向列的非关系型数据库。 HBase的特点 1.海量数据存储,HBase表中的数据能够容纳上百亿行*上百万列。 2.面向列的存储,数据在表中是按照列进行存储的,能够动态的增加列并对列进行各种操作。 3.准实时查询,HBase在海量的数据量下能够接近 阅读全文
posted @ 2019-01-04 18:13 辣鸡小篮子 阅读 (1349) 评论 (0) 编辑
摘要:1.简介 若HDFS集群中只配置了一个NameNode,那么当该NameNode所在的节点宕机,则整个HDFS就不能进行文件的上传和下载。 若YARN集群中只配置了一个ResourceManager,那么当该ResourceManager所在的节点宕机,则整个YARN就不能进行任务的计算。 *Had 阅读全文
posted @ 2018-11-13 09:39 辣鸡小篮子 阅读 (384) 评论 (0) 编辑
摘要:1.简介 Hadoop是大数据通用处理平台,提供了分布式文件存储以及分布式离线并行计算,由于Hadoop的高拓展性,在使用Hadoop时通常以集群的方式运行,集群中的节点可达上千个,能够处理PB级的数据。 Hadoop各个模块剖析:https://www.cnblogs.com/funyoung/p 阅读全文
posted @ 2018-11-12 09:47 辣鸡小篮子 阅读 (573) 评论 (0) 编辑
摘要:1.简介 Hadoop是一款开源的大数据通用处理平台,其提供了分布式存储和分布式离线计算,适合大规模数据、流式数据(写一次,读多次),不适合低延时的访问、大量的小文件以及频繁修改的文件。 *Hadoop由HDFS、YARN、MapReduce组成。 Hadoop的特点: 1.高扩展(动态扩容):能够 阅读全文
posted @ 2018-11-06 20:07 辣鸡小篮子 阅读 (1608) 评论 (1) 编辑