摘要: 什么是注意力机制? 注意力机制模仿了生物观察行为的内部过程,即一种将内部经验和外部感觉对齐从而增加部分区域的观察精细度的机制。例如人的视觉在处理一张图片时,会通过快速扫描全局图像,获得需要重点关注的目标区域,也就是注意力焦点。然后对这一区域投入更多的注意力资源,以获得更多所需要关注的目标的细节信息,阅读全文
posted @ 2019-06-17 09:50 Maple17 阅读(162) 评论(0) 编辑
摘要: 输出是一个连续的数值。 模型表示 对于一个目标值,它可能受到多个特征的加权影响。例如宝可梦精灵的进化的 值,它不仅受到进化前的 值的影响,还可能与宝可梦的 值、类型、高度以及重量相关。因此,对于宝可梦进化后的 值,我们可以用如下线性公式来表示: $$y=b+\sum_{i=1}^n{\theta_i阅读全文
posted @ 2019-06-05 14:25 Maple17 阅读(250) 评论(0) 编辑
摘要: 基本信息 文献:Predict Anchor Links across Social Networks via an Embedding Approach 时间:2016 期刊:IJCAI 引言 预测跨社交网络的锚链接对于一系列应用具有重要意义,包括跨网络信息扩散和跨域推荐。一个具有挑战性的问题是:阅读全文
posted @ 2019-06-21 16:13 Maple17 阅读(71) 评论(0) 编辑
摘要: 本文是对文献 《Graph Neural Networks: A Review of Methods and Applications》 的内容总结,详细内容请参照原文。 引言 大量的学习任务都要求能处理包含丰富的元素间关联关系的图数据,例如物理系统建模、疾病分类以及文本和图像等非结构数据的学习等。阅读全文
posted @ 2019-06-19 11:45 Maple17 阅读(16) 评论(0) 编辑
摘要: 本文是对文献 《An Attentive Survey of Attention Models》 的总结,详细内容请参照原文。 引言 注意力模型现在已经成为神经网络中的一个重要概念,并已经应用到多个应用领域。本文给出了注意力机制的主要思想,并对现有的一些注意力模型进行了分类,以及介绍了注意力机制与不阅读全文
posted @ 2019-06-17 17:09 Maple17 阅读(54) 评论(0) 编辑
摘要: 基本信息 论文题目:GRAPH ATTENTION NETWORKS 时间:2018 期刊:ICLR 主要动机 探讨图谱(Graph)作为输入的情况下如何用深度学习完成分类、预测等问题;通过堆叠这种层(层中的顶点会注意邻居的特征),我们可以给邻居中的顶点指定不同的权重,不需要任何一种耗时的矩阵操作(阅读全文
posted @ 2019-06-17 10:02 Maple17 阅读(20) 评论(0) 编辑
摘要: 什么是注意力机制? 注意力机制模仿了生物观察行为的内部过程,即一种将内部经验和外部感觉对齐从而增加部分区域的观察精细度的机制。例如人的视觉在处理一张图片时,会通过快速扫描全局图像,获得需要重点关注的目标区域,也就是注意力焦点。然后对这一区域投入更多的注意力资源,以获得更多所需要关注的目标的细节信息,阅读全文
posted @ 2019-06-17 09:50 Maple17 阅读(162) 评论(0) 编辑
摘要: `MLlib MLlib` 由一些通用的学习算法和工具组成,包括分类、回归、聚类、协同过滤、降维等,同时还包括底层的优化原语和高层的管道 API。具体来说,主要包括以下几方面的内容: 1. 机器学习算法:常用的学习算法,如分类、回归、聚类和协同过滤; 2. 特征化工具:特征提取、转化、降维和特征选择阅读全文
posted @ 2019-06-14 10:45 Maple17 阅读(50) 评论(0) 编辑
摘要: 1. RDD 的设计与运行原理 Spark 的核心是建立在统一的抽象 RDD 之上,基于 RDD 的转换和行动操作使得 Spark 的各个组件可以无缝进行集成,从而在同一个应用程序中完成大数据计算任务。 在实际应用中,存在许多迭代式算法和交互式数据挖掘工具,这些应用场景的共同之处在于不同计算阶段之间阅读全文
posted @ 2019-06-12 14:12 Maple17 阅读(137) 评论(0) 编辑
摘要: Spark 可以独立安装使用,也可以和 Hadoop 一起安装使用。在安装 Spark 之前,首先确保你的电脑上已经安装了 或者更高的版本。 Spark 安装 访问 "Spark 下载页面" ,并选择最新版本的 Spark 直接下载,当前的最新版本是 2.4.2 。下载好之后需要解压缩到安装文件夹中阅读全文
posted @ 2019-06-11 11:42 Maple17 阅读(43) 评论(0) 编辑
摘要: 在实际的程序开发中,我们通常会将一个不可变的变量声明为一个常量。在很多高级语言中都会提供常量的关键字来定义常量,如 中的 , 中的 等,但是 语言因为变量无类型,所以也就不存在这样的修饰符,其本身并未提供任何机制来进行常量的定义。因此我们只能通过自己定义类的方法来定义一个符合常量规则的类,使得该类定阅读全文
posted @ 2019-06-10 11:36 Maple17 阅读(83) 评论(0) 编辑
摘要: 问题场景 小王是某游戏公司的新入职的职员,有一天,组长交给了他一个任务,为一个即将准开发的一款游戏设计一些人物角色,其中包括多种职业,如牧师、战士和法师等等。每种职业都有一些自身独有的属性和技能,但是也会有一些共有的属性和方法。假设这家公司是用 来开发游戏的。 经历过面向对象编程学习的小王很快就理清阅读全文
posted @ 2019-06-06 17:11 Maple17 阅读(454) 评论(0) 编辑