摘要: 庐陵乡土“订婚”文化简记 乡土文化简记 阅读全文
posted @ 2023-02-10 01:01 Milkha 阅读(112) 评论(0) 推荐(0)
摘要: Spark Shuffle 这一篇主要讲 Spark 中的 Shuffle 机制. Shuffle Write Shuffle Read 将 job 划分成多个 task 后, stage 内的一个 task 可以在一个节点上完成计算, task 内以来的数据可以直接存储在当前结点上 (内存或者磁盘中). 但是 stage 间 阅读全文
posted @ 2022-10-31 15:52 Milkha 阅读(66) 评论(2) 推荐(0)
摘要: Spark 逻辑处理流程与物理执行计划 一直以来都想了解一下 Spark 的运行原理, 但一直都浮于表面, 难以深入. 去年买了一本 《大数据处理框架 Apache Spark 设计与实现》, 但是一直没时间好好看看, 最近抽时间过了一下这本书, 在此记录一下. 这一篇主要讲 Spark 中逻辑处理流程时怎么生成的, 以及在逻辑处理流程的 阅读全文
posted @ 2022-10-31 15:29 Milkha 阅读(315) 评论(0) 推荐(0)
摘要: Spark Overview 一直以来都想了解一下 Spark 的运行原理, 但一直都浮于表面, 难以深入. 去年买了一本 《大数据处理框架 Apache Spark 设计与实现》, 但是一直没时间好好看看, 最近抽时间过了一下这本书, 在此记录一下. 先大致了解一下 Spark. Introducion Spark Appli 阅读全文
posted @ 2022-10-31 15:27 Milkha 阅读(35) 评论(0) 推荐(0)
摘要: 推荐系统中的特征交叉 特征交叉是推荐系统中重要的一环,连续特征&连续特征、连续特征&离散特征、离散特征&离散特征等,这些是怎么交叉的呢?有哪些交叉方式呢? 阅读全文
posted @ 2022-10-22 17:53 Milkha 阅读(796) 评论(0) 推荐(0)
摘要: softmax求导的过程 (图出自李宏毅老师的PPT) 对机器学习/深度学习有所了解的同学肯定不会对 softmax 陌生,它时而出现在多分类中用于得到每个类别的概率,时而出现在二分类中用于得到正样本的概率(当然,这个时候 softmax 以 sigmoid 的形式出现)。 1. 从 sigmoid 到 softmax si 阅读全文
posted @ 2022-02-25 21:21 Milkha 阅读(1387) 评论(0) 推荐(1)
摘要: 由于研一的疏忽,导致学科的时候少选了一个学分😥😥😥😥😥,悲催的我只得在研二上学期,其他同学都不用上课的时候,还要每周去上课,到了还要紧张兮兮的准备期末考试,再一次体会到了被期末考试支配的恐惧,特别是我选的是令人望而生畏的随机过程。不过经过一学期的学习,也算摸着了一点随机过程的门道,希望以后 阅读全文
posted @ 2022-01-06 21:51 Milkha 阅读(328) 评论(0) 推荐(0)
摘要: 文章记录的内容是参加DataWhale的组队学习统计学习方法(第二版)习题解答过程中的笔记与查缺补漏! 参考解答地址: 提升方法。 1. 某公司招聘职员考查身体、业务能力、发展潜力这3项。身体分为合格1、不合格0两级,业务能力和发展潜力分为上1、中2、下3三级。分类为合格1 、不合格-1两类。已知1 阅读全文
posted @ 2021-12-31 11:47 Milkha 阅读(651) 评论(0) 推荐(0)
摘要: 文章记录的内容是参加DataWhale的组队学习统计学习方法(第二版)习题解答过程中的笔记与查缺补漏! 参考解答地址:支持向量机。 1. 比较感知机的对偶形式与线性可分支持向量机的对偶形式。 解答思路: 列出感知机的原始形式; 写出感知机的对偶形式; 列出线性可分支持向量机的原始形式; 写出线性可分 阅读全文
posted @ 2021-12-31 10:28 Milkha 阅读(1337) 评论(0) 推荐(0)
摘要: 文章记录的内容是参加DataWhale的组队学习统计学习方法(第二版)习题解答过程中的笔记与查缺补漏! 参考解答地址:Logistic回归与最大熵模型。 1. 确认Logistic分布属于指数分布族。 解答思路: 列出 Logistic 分布的定义 列出指数分布族的定义 通过指数倾斜,证明Logis 阅读全文
posted @ 2021-12-28 15:22 Milkha 阅读(199) 评论(0) 推荐(0)