摘要: 关于大模型对未来影响的一点看法 人们总是高估了未来一到两年的变化,低估了未来十年的变革。 比尔盖茨 近来OpenAI的GPT技术可以说在全球都带来了巨大的影响,也让大家看到了什么叫大力出奇迹。chatGPT和GPT4的能力给了大家很大的震撼,其流畅自如、逻辑清晰、出众的能力,给使用过的人都留下了深刻的印象,同时也让无数人对这项技术 阅读全文
posted @ 2023-03-23 20:16 Milkha 阅读(403) 评论(0) 推荐(1) 编辑
摘要: 一个例子了解operator+ 直击 operator+ 的秘密 阅读全文
posted @ 2023-03-08 09:36 Milkha 阅读(15) 评论(0) 推荐(0) 编辑
摘要: 庐陵乡土“订婚”文化简记 乡土文化简记 阅读全文
posted @ 2023-02-10 01:01 Milkha 阅读(79) 评论(0) 推荐(0) 编辑
摘要: Spark Shuffle 这一篇主要讲 Spark 中的 Shuffle 机制. Shuffle Write Shuffle Read 将 job 划分成多个 task 后, stage 内的一个 task 可以在一个节点上完成计算, task 内以来的数据可以直接存储在当前结点上 (内存或者磁盘中). 但是 stage 间 阅读全文
posted @ 2022-10-31 15:52 Milkha 阅读(28) 评论(2) 推荐(0) 编辑
摘要: Spark 逻辑处理流程与物理执行计划 一直以来都想了解一下 Spark 的运行原理, 但一直都浮于表面, 难以深入. 去年买了一本 《大数据处理框架 Apache Spark 设计与实现》, 但是一直没时间好好看看, 最近抽时间过了一下这本书, 在此记录一下. 这一篇主要讲 Spark 中逻辑处理流程时怎么生成的, 以及在逻辑处理流程的 阅读全文
posted @ 2022-10-31 15:29 Milkha 阅读(147) 评论(0) 推荐(0) 编辑
摘要: Spark Overview 一直以来都想了解一下 Spark 的运行原理, 但一直都浮于表面, 难以深入. 去年买了一本 《大数据处理框架 Apache Spark 设计与实现》, 但是一直没时间好好看看, 最近抽时间过了一下这本书, 在此记录一下. 先大致了解一下 Spark. Introducion Spark Appli 阅读全文
posted @ 2022-10-31 15:28 Milkha 阅读(23) 评论(0) 推荐(0) 编辑
摘要: 推荐系统中的特征交叉 特征交叉是推荐系统中重要的一环,连续特征&连续特征、连续特征&离散特征、离散特征&离散特征等,这些是怎么交叉的呢?有哪些交叉方式呢? 阅读全文
posted @ 2022-10-22 17:53 Milkha 阅读(81) 评论(0) 推荐(0) 编辑
摘要: softmax求导的过程 (图出自李宏毅老师的PPT) 对机器学习/深度学习有所了解的同学肯定不会对 softmax 陌生,它时而出现在多分类中用于得到每个类别的概率,时而出现在二分类中用于得到正样本的概率(当然,这个时候 softmax 以 sigmoid 的形式出现)。 1. 从 sigmoid 到 softmax si 阅读全文
posted @ 2022-02-25 21:21 Milkha 阅读(1237) 评论(0) 推荐(1) 编辑
摘要: 由于研一的疏忽,导致学科的时候少选了一个学分😥😥😥😥😥,悲催的我只得在研二上学期,其他同学都不用上课的时候,还要每周去上课,到了还要紧张兮兮的准备期末考试,再一次体会到了被期末考试支配的恐惧,特别是我选的是令人望而生畏的随机过程。不过经过一学期的学习,也算摸着了一点随机过程的门道,希望以后 阅读全文
posted @ 2022-01-06 21:51 Milkha 阅读(158) 评论(0) 推荐(0) 编辑
摘要: 文章记录的内容是参加DataWhale的组队学习统计学习方法(第二版)习题解答过程中的笔记与查缺补漏! 参考解答地址: 提升方法。 1. 某公司招聘职员考查身体、业务能力、发展潜力这3项。身体分为合格1、不合格0两级,业务能力和发展潜力分为上1、中2、下3三级。分类为合格1 、不合格-1两类。已知1 阅读全文
posted @ 2021-12-31 11:47 Milkha 阅读(542) 评论(0) 推荐(0) 编辑