02 2024 档案

摘要:OpenAI Sora技术报告官方链接 可能无法访问 Video generation models as world simulators 我们探索了视频数据生成模型的大规模训练方法。具体来说,在不同时长、分辨率和纵横比的视频和图片数据上联合训练的文本条件扩散模型。利用transformer架构操 阅读全文
posted @ 2024-02-16 23:04 星辰大海,绿色星球 阅读(344) 评论(0) 推荐(0)
摘要:概况 目标 给定一张参考人物图\(I_{ref}\)和运动序列\(p^{1:N}=\{p_1, \cdots, p_N\}\),\(N\)是视频帧长度。论文目标是合成一个运动连贯的视频\(I^{1:N}=\{I_1, \cdots, I_N\}\),合成视频中人物与参考人物是一样的,且遵循所提供的运 阅读全文
posted @ 2024-02-15 10:48 星辰大海,绿色星球 阅读(158) 评论(0) 推荐(0)
摘要:AnimateAnyone 目标 给定一张人物的图像和一个运动姿态序列,然后生成这种运动姿态的参考人物的视频片段。 预备知识 视频生成依赖的基础知识如扩散模型、隐变量扩散模型等在此不再赘述,可以自行查阅相关知识。本博客可供参考的有扩散模型 Diffusion Model和Latent Diffusi 阅读全文
posted @ 2024-02-14 10:31 星辰大海,绿色星球 阅读(600) 评论(0) 推荐(0)
摘要:预备知识 视频生成依赖的技术点:Stable Diffusion,Latent Diffusion Model,DreamBooth, LoRA。此处不进行相关知识点介绍,如需请查阅相关资料 个性化动画生成 目标 生成个性化动画的图像模型,一般要求用对应的视频训练集进行额外的微调。而这将使事情变得困 阅读全文
posted @ 2024-02-03 10:30 星辰大海,绿色星球 阅读(403) 评论(0) 推荐(0)