摘要：设V是数域P上的n维线性空间，$\epsilon_1, \epsilon_2,...,\epsilon_n$是V的一组基，现在我们来建立线性变换与矩阵的关系。 空间V中的任意向量$\xi$可用被基$\epsilon_1, \epsilon_2,...,\epsilon_n$线性表示，即有表达式 $\ 阅读全文

摘要：在这一节，我们来介绍线性变换的运算及其简单性质 ###乘法 设$\mathscr {A,B}$是线性空间V上的两个线性变换，定义它们的乘积$\mathscr {AB}$为 $(\mathscr {AB})(\pmb \alpha)=\mathscr A(\mathscr B (\pmb \alpha 阅读全文

摘要：线性空间是某一类事物从量的方面的一个抽象。我们认识客观事物，固然要弄清楚他们单个的和总体的性质，但更重要的是研究他们之间的各种各样的联系。在线性空间中，事物之间的联系就反映为线性空间的映射。线性空间V到自身的映射通常称为V的一个变换。这一章中要讨论的线性变换是最简单的，同时也可以认为是最基本的一种变 阅读全文

摘要：VIT An image is worth 16x16 words: transformers for image recognition at scale 将transformer首次应用在视觉任务中，并取得了超过CNN方法的性能。 标准的transformer接收一维的向量序列如 $(x_1, 阅读全文

摘要：Outlook Attention 设给定输入为 $X \in R^{H \times W \times C}$, 首先经过两个线性映射得到两个输出A 和 V，A叫做outlook weight $A \in R^{H \times W \times K^4}$, V叫做value represen 阅读全文