Sutskever-精选论文清单-三-

Sutskever 精选论文清单（三）

原文：Sutskever's List

译者：飞龙

协议：CC BY-NC-SA 4.0

J

  • JPEGs

K

  • 卡帕西，安德烈, 第 2 次, 第 3 次

  • Know Your Meme

  • KL（Kullback-Leibler 散度）

  • Kolmogorov 复杂性与算法随机性（乌斯宾斯基、申、韦尔什查金）, 第 2 次

    • 算法统计, 第 2 次

    • 重要性

  • Kaplan 缩放定律

L

  • 基于位置的寻址

  • LSTM（长短期记忆）, 第 2 次, 第 3 次

    • 网络, 第 2 次, 第 3 次

  • LRN（局部响应归一化）

  • LaTeX

  • 李飞飞

  • LLMs（大型语言模型）

  • LSTM（长短期记忆）网络

  • 语言建模，定义

  • 数据量的限制

  • LBP（局部二值模式）

  • LeNet

  • 语言模型, 第 2 次

  • LDA（隐狄利克雷分配）

  • LM 污染指数

M

  • 米科洛夫，托马斯

  • 多种解释

  • MHDPA（多头点积注意力）

  • MPNNs（消息传递神经网络）

  • 模型退化

  • 模型并行

  • MDL（最小描述长度）原理, 第 2 次, 第 3 次

  • 马库斯，加里

  • 明斯基，马文

  • Mesh-TensorFlow

  • 马利克，吉滕德拉

  • MMLU（大规模多任务语言理解评估）

  • Megatron-LM

  • 掩码自注意力

  • 机器超级智能

    • AIXI, 第 2 次

    • 智能体与极限, 第 2 次

    • 定义智能

    • 环境分类

    • 通用智能度量, 第 2 次

N

  • NTMs（神经图灵机）, 第 2 次

  • NLL（负对数似然）

  • 量子化学中的神经消息传递, 第 2 次

    • 影响

    • 消息传递神经网络, 第 2 次

    • 训练与结果

  • NMT（神经机器翻译）

O

  • 流形外采样

  • OpenAI Gym

P

  • 过拟合

  • 克里斯·奥拉, 第 2 次

  • 输出门

  • 多项式曲线拟合

  • 并行

  • GPipe

  • 流水线并行, 第 2 次

  • 结果, 第 2 次

  • 查尔斯·S·皮尔斯

  • 困惑度，定义

  • Ptr-Net（指针网络）, 第 2 次

  • 实验结果, 第 2 次, 第 3 次

  • 意义

  • 窥视连接

  • 后验坍缩

Q

  • 量化感知训练

  • Q*（Q-star）

R

  • RL（强化学习）

  • 舍入误差

  • RNNencdec（RNN 编码器-解码器）, 第 2 次

  • ResNet v2

  • 消融研究, 第 2 次

  • 后激活到先激活

关系循环神经网络（RNN）

  • 实验方法与实证结果, 第 2 次

  • 历史背景

  • 阅读清单，约翰·卡马克, 第 2 次

  • RNN（循环神经网络）, 第 2 次, 第 3 次

  • 卡帕斯基的博客文章

  • 正则化, 第 2 次

  • 关系循环神经网络, 第 2 次

  • 推理

  • 关于……的争论, 第 2 次

  • RNs（关系网络）

  • 反转输入句子, 第 2 次

  • RNNsearch, 第 2 次

  • ResNet（残差网络）, 第 2 次, 第 3 次

  • 与其他主要架构的比较, 第 2 次

  • 通过密集预测扩展, 第 2 次

  • 人类表现阈值, 第 2 次

  • 实际应用

  • 缩放, 第 2 次

  • 推理模型

  • 分布脆性, 第 2 次

  • 作为推理接口的提示, 第 2 次

  • 反转诅咒

  • RPW（读-处理-写）, 第 2 次

  • RNNsearch-50模型, 第 2 次

  • 关系推理

  • 基准评估, 第 2 次

  • 大卫·鲁梅尔哈特

  • RoPE（旋转位置嵌入）

S

  • SGD（随机梯度下降）, 第 2 次

缩放

  • 深度学习

  • B.F.斯金纳

  • SQuAD

  • SVM（支持向量机）

  • 理查德·萨顿

  • seq2seq（序列到序列）模型

  • 顺序很重要, 第 2 次

  • 逐序列批归一化

  • 简洁性

  • Sort-of-CLEVR

  • 伊利亚·苏茨克维, 第 2 次

  • ……的崛起, 第 2 次

  • 约翰·塞尔

  • SortaGrad

  • 超对齐团队

  • 状态描述

  • SchNet

  • 超智能, 第 2 次

  • 莱格对智能的定义

  • 缩放定律

  • 损坏的, 第 2 次

  • 污染

T

  • tanh（双曲正切）

  • 图灵测试, 第 2 次

  • TensorFlow

  • 马克斯·泰格马克

  • Transformer-XL

训练

  • ……的挑战, 第 2 次

  • 变换器

  • 实证结果

  • TPU（张量处理单元）

  • 塔式架构

  • 技术奇点

U

  • UT（通用变换器）, 第 2 次

V

  • VLAEs（变分有损自编码器）, 第 2 次

  • VAEs（变分自编码器）

VLAE（变分有损自编码器）

  • 自回归先验

  • 概述

  • 结果

  • 梯度消失问题, 第 2 次

VGGNet（视觉几何组网络）

  • ResNet对比

Y

  • 费舍尔·于

Z

  • ZPVE（零点振动能）

  • 沃伊切赫·扎伦巴

  • ZFNet（零前馈网络），ResNet对比

  • ZeRO（零冗余优化器）

posted @ 2026-09-22 11:34  绝不原创的飞龙  阅读(7)  评论(0)    收藏  举报