会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
哥们要飞的blog
Nice to meet you!
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
24
25
26
27
28
29
30
31
32
···
49
下一页
2021年12月12日
【每日一题】【字符串与数字互转】【去除空格】【大数处理】2021年12月12日-8. 字符串转换整数 (atoi)
摘要: 请你来实现一个 myAtoi(string s) 函数,使其能将字符串转换成一个 32 位有符号整数(类似 C/C++ 中的 atoi 函数)。 函数 myAtoi(string s) 的算法如下: 来源:力扣(LeetCode)链接:https://leetcode-cn.com/problems
阅读全文
posted @ 2021-12-12 20:52 哥们要飞
阅读(50)
评论(0)
推荐(0)
2021年12月11日
【大数据面试】【框架】kafka:组成、台数/参数配置、持久化、ISR队列、宕机、丢数据、重复数据、数据积压、优化各种配置(刷盘、存盘、副本、压缩)、zk、其他
摘要: 一、基本信息 1、组成 生产者 broker 消费者 zookeeper:brokerid、consumer信息(不包含生产者的信息) 2、需要安装多少台 2 * (生产者的峰值生产速率 * 副本 / 100) + 1 = 3 生产环境下,配置副本的数量为2-3个,2个居多 3、副本的优势和劣势 副
阅读全文
posted @ 2021-12-11 22:24 哥们要飞
阅读(520)
评论(0)
推荐(0)
【每日一题】2021年12月11日-69. Sqrt(x)/x的平方根
摘要: 给你一个非负整数 x ,计算并返回 x 的 算术平方根 。 由于返回类型是整数,结果只保留 整数部分 ,小数部分将被 舍去 。 注意:不允许使用任何内置指数函数和算符,例如 pow(x, 0.5) 或者 x ** 0.5 。 来源:力扣(LeetCode)链接:https://leetcode-cn
阅读全文
posted @ 2021-12-11 21:11 哥们要飞
阅读(47)
评论(0)
推荐(0)
【大数据面试】【框架】Flume:Source的断点续传、重复数据、Channel选择
摘要: 〇、用途 流式结构 获取磁盘日志,拦截器过滤后,传递指定数据,写入HDFS或kafka 一、组成-Source、Channel、Sink 事务(put/take) 1、Source taildir source: (1)特点:断点续传+多目录(维护offset) 产生自哪个版本-Apache Flu
阅读全文
posted @ 2021-12-11 11:35 哥们要飞
阅读(580)
评论(0)
推荐(0)
【大数据面试】【框架】Zookeeper作用、半数机制、命令、安装台数
摘要: 〇、作用 存储和管理数据 Zookeeper=文件系统+通知机制 树形结构,每个节点被称为一个Znode(1MB) 一、半数机制 1、注意 安装奇数台(4台) 二、常用命令 ls get create 2、客户端命令行操作 查看子节点:ls path 获得节点的值:get path 递归删除节点:d
阅读全文
posted @ 2021-12-11 10:41 哥们要飞
阅读(181)
评论(0)
推荐(0)
2021年12月10日
【大数据面试】【框架】Shuffle优化、内存参数配置、Yarn工作机制、调度器使用
摘要: 三、MapReduce 1、Shuffle及其优化☆ Shuffle是Map方法之后,Reduce方法之前,混洗的过程 Map-->getPartition(标记数据的分区)-->对应的环形缓冲区(一侧存数据,一侧存索引,默认大小为100M,达到80%时进行反向溢写以提高空间利用率) (溢写前需要对
阅读全文
posted @ 2021-12-10 22:38 哥们要飞
阅读(207)
评论(0)
推荐(1)
【每日一题】【List与Array互转】【工具类的使用】2021年12月10日-56. 合并区间
摘要: 以数组 intervals 表示若干个区间的集合,其中单个区间为 intervals[i] = [starti, endi] 。请你合并所有重叠的区间,并返回一个不重叠的区间数组,该数组需恰好覆盖输入中的所有区间。 来源:力扣(LeetCode)链接:https://leetcode-cn.com/
阅读全文
posted @ 2021-12-10 20:49 哥们要飞
阅读(41)
评论(0)
推荐(0)
2021年12月9日
【大数据面试】【框架】Hadoop-入门、HDFS
摘要: 一、入门 1、常用端口号 2.x 50070:查看HDFS Web-UI 8088:查看MapReduce运行情况 19888:历史服务器 9000:hdfs客户端访问集群 50090:SecondaryNameNode 3.x: 50070-->9870 9000-->8020 3、Hadoop的
阅读全文
posted @ 2021-12-09 21:36 哥们要飞
阅读(73)
评论(0)
推荐(0)
【每日一题】2021年12月9日-124. 二叉树中的最大路径和
摘要: 路径 被定义为一条从树中任意节点出发,沿父节点-子节点连接,达到任意节点的序列。同一个节点在一条路径序列中 至多出现一次 。该路径 至少包含一个 节点,且不一定经过根节点。 路径和 是路径中各节点值的总和。 给你一个二叉树的根节点 root ,返回其 最大路径和 。 来源:力扣(LeetCode)链
阅读全文
posted @ 2021-12-09 19:41 哥们要飞
阅读(33)
评论(0)
推荐(0)
【大数据面试】【框架】Linux命令、Shell工具、常见Shell脚本(群起脚本、数仓导入)
摘要: 一、Linux 1、常用高级命令 ps -ef:查看进程详情,ps -ef|grep dae可以搜索指定进程,-e表示环境变量 ps -au:以用户为主的详细格式,显示进程平均占用资源,不包括cmd列 df -h:文件系统的磁盘空间占用情况,表示大文件,-i表示innode索引命名的小文件 ioto
阅读全文
posted @ 2021-12-09 17:06 哥们要飞
阅读(137)
评论(0)
推荐(0)
上一页
1
···
24
25
26
27
28
29
30
31
32
···
49
下一页
公告