2024-02-06 - 多模态大模型一统NLP和CV - 卢菁

摘要

2024-02-08 周四 桑梓 小雾

课程内容

1. 基础原理

关键点: 因为技术认知存在问题，所以之前的研究会把 NLP 和 CV 区分开；随着 Transfomer 技术的发展，NLP 和 CV 将会融合在一起。

2. 应用场景

• 图文匹配

• DELL-E

关键词:
a. 文字 token + 图像 token
b. 文字 embaedding + 图像 embaedding

总结