上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 31 下一页
摘要: 1.单例模式的定义 单例模式确保某个类只有一个实例,而且自行实例化并向整个系统提供这个实例。在计算机系统中,线程池、缓存、日志对象、对话框、打印机、显卡的驱动程序对象常被设计成单例。这些应用都或多或少具有资源管理器的功能。每台计算机可以有若干个打印机,但只能有一个Printer Spooler,以避 阅读全文
posted @ 2021-11-25 16:50 民宿 阅读(51) 评论(0) 推荐(0)
摘要: 1.二分查找算法详解 算法定义 二分查找算法又叫折半查找算法, 是一种基于比较目标值和数组中间元素的教科书式算 使用条件 待查找的数组必须是有顺序的 算法规则 1.如果目标值等于中间元素,则找到目标值。 2.如果目标值较小,继续在左侧搜索。 3.如果目标值较大,则继续在右侧搜索。 算法分析 1.初始 阅读全文
posted @ 2021-11-25 15:51 民宿 阅读(181) 评论(0) 推荐(0)
摘要: 1.Hadoop相关配置文件 1.1core-site.xml <?xml version="1.0" encoding="utf-8"?> <configuration> <!-- HA 指定hdfs的nameservice为bdpha--> <property> <name>fs.default 阅读全文
posted @ 2021-11-25 13:21 民宿 阅读(200) 评论(0) 推荐(0)
摘要: 问题 访问HDFS报错:org.apache.hadoop.security.AccessControlException: Permission denied import org.apache.hadoop.conf.Configuration; import org.apache.hadoop 阅读全文
posted @ 2021-11-25 11:55 民宿 阅读(441) 评论(0) 推荐(0)
摘要: 前言 公司在做安全漏洞扫描。发现CDH Hadoop默认配置下存在未授权漏洞,攻击者可以在未授权的情况下远程执行代码。需立即修复加固。 1.Hadoop HTTP web-控制台认证 我们安装完hadoop后,默认情况下我们访问UI界面是没有任何安全验证的。现在我想要的是对Hadoop的Web控制台 阅读全文
posted @ 2021-11-25 11:38 民宿 阅读(2362) 评论(0) 推荐(0)
摘要: 前言 公司在做安全漏洞扫描。发现CDH Zookeeper存在未授权访问入侵问题。 1.zookeeper的基本情况 zookeeper是分布式协同管理工具,常用来管理系统配置信息,提供分布式协同服务。zookeeper官网下载软件包,bin目录下有客户端脚本和服务端脚本。另外还有个工具对理解和使用 阅读全文
posted @ 2021-11-24 16:41 民宿 阅读(1788) 评论(0) 推荐(2)
摘要: 做为程序员我们都知道数据结构和算法十分重要,同时学好数据结构和算法对大多数程序员来说也是相当困难的一件事情,不得不承认自己也是这大部分中的其中一个🙍,但是如果想让自己的编程之路走的更长远,必须要啃下这块难啃的骨头🦴。所以我准备认真的开始了,希望自己可以坚持下去。喜欢的希望帮忙点个赞👍啊 复杂度 阅读全文
posted @ 2021-11-24 11:56 民宿 阅读(701) 评论(0) 推荐(0)
摘要: 1.插入排序详解 插入排序(英语:Insertion Sort)是一种简单直观的排序算法。它的工作原理是通过构建有序序列,对于未排序数据,在已排序序列中从后向前扫描,找到相应位置并插入。插入排序在实现上,通常采用in-place排序(即只需用到的额外空间的排序),因而在从后向前扫描过程中,需要反复把 阅读全文
posted @ 2021-11-24 10:03 民宿 阅读(97) 评论(0) 推荐(0)
摘要: 1.概念 反压(backpressure)是流式计算中十分常见的问题。反压意味着数据管道中某个节点成为瓶颈,处理速率跟不上上游发送数据的速率,而需要对上游进行限速。由于实时计算应用通常使用消息队列来进行生产端和消费端的解耦,消费端数据源是 pull-based 的,所以反压通常是从某个节点传导至数据 阅读全文
posted @ 2021-11-23 17:12 民宿 阅读(1725) 评论(0) 推荐(1)
摘要: 1.场景 如果某个key下记录数远超其他key,在join或group的时候可能会导致某个reduce任务特别慢。本文分析下join的场景。 SQL如下:查询每个appid打开的次数,需要排除掉作弊的imei。 SELECT appid, count(*) FROM ( SELECT md5imei 阅读全文
posted @ 2021-11-23 16:43 民宿 阅读(658) 评论(0) 推荐(0)
上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 31 下一页