摘要: 题目一: 给定一个整数数组 nums 和一个整数目标值 target,请你在该数组中找出 和为目标值 target 的那 两个 整数,并返回它们的数组下标。 你可以假设每种输入只会对应一个答案。但是,数组中同一个元素在答案里不能重复出现。 你可以按任意顺序返回答案。 提示: 2 <= nums.le 阅读全文
posted @ 2023-02-22 23:55 几人著眼到青衫 阅读(19) 评论(0) 推荐(0)
摘要: 在Map方法之后,Reduce方法之前的数据处理过程称之为Shuffle. Map方法输出的数据会获得对应的分区,进入环形缓冲区(缓冲区一半写索引,另一半写数据)。数据达到缓冲区的80%会发生溢写。在溢写之前会对key索引进行快排(按照数据字典),最后对分区进行归并排序。在归并后还可进行对数据的压缩 阅读全文
posted @ 2023-02-22 20:16 几人著眼到青衫 阅读(106) 评论(0) 推荐(0)
摘要: (1)程序先找到数据存储的目录 (2)遍历目录对每个文件进行切片 (3)遍历一个文件: 获取文件大小 计算切片大小 默认情况下,切片大小等于blocksize 每次切片时都要判断剩下部分师否大于块的1.1倍,小于1.1划分为1个切片 讲切片信息写到一个切片规划文件中 整个切片的核心过程在getSpl 阅读全文
posted @ 2023-02-22 09:19 几人著眼到青衫 阅读(67) 评论(0) 推荐(0)