Tomorrow1126 - 博客园

2021年11月7日

摘要：图像质量评价（Image Quality Assessment）图像修复的难点之一是质量评估。其主要原因是主观评价的模糊性和获取培训数据的成本。由于前面讨论的问题，虽然对退化图像提出了许多有效的IQA方法，例如腐蚀、压缩或噪声图像，但这些方法不能用于评估修复图像。为了克服前面问题，获得主观评价，主阅读全文

posted @ 2021-11-07 18:41 Tomorrow1126 阅读(619) 评论(0) 推荐(0)

artifact是什么？

摘要：当我们非常仔细地观察神经网络生成的图像时，经常会看到一些奇怪的棋盘格子状的伪影（artifact）。这种现象有些情况下比其他情况更明显，但最近的模型很多都会出现这种现象。出现的原因：当我们用神经网络生成图像时，我们经常从低分辨率、高阶描述中构建图像。这会让网络先描绘粗糙的图像，再填充细节。因此，阅读全文

posted @ 2021-11-07 13:04 Tomorrow1126 阅读(1182) 评论(0) 推荐(0)

affine transformation仿射变换

摘要：其实仿射变换是投影变换的一种特殊形式，在图像处理中，大部分图像变换算法用仿射变换就可以得到不错的效果，并且数学意义比较明确易懂，因此仿射变换相对来说更常用一些。首先从数学的角度，所谓仿射变换，就是向量经过一次线性变换加一次平移变换，用公式可以表示为：对于一副图像，如果我们知道矩阵T，便可以对图像阅读全文

posted @ 2021-11-07 11:37 Tomorrow1126 阅读(208) 评论(0) 推荐(0)

2021年11月6日

论文阅读笔记stylegan:A Style-Based Generator Architecture for Generative Adversarial Networks

摘要：一、contributions StyleGAN，提出了一个新的 generator architecture，号称能够控制所生成图像的高层级属性(high-level attributes)，如发型、雀斑等；并且生成的图像在一些评价标准上得分更好；同时随论文开源了一个高质量数据集：FFHQ，包阅读全文

posted @ 2021-11-06 20:38 Tomorrow1126 阅读(273) 评论(0) 推荐(0)

论文阅读笔记 PTI: Pivotal Tuning for Latent-based editing of Real Images

摘要：论文题目：基于潜意识的真实图像编辑的关键性调整（基于stylegan进行的调整）一、contributions 在本文中，我们介绍了一种新的方法，以减轻失真编辑性的权衡，使其在真实图像上的分布。论点：对于一个编辑任务，对于真实图片的映射到隐层空间后已经out of domain，导致生成的图片会阅读全文

posted @ 2021-11-06 20:33 Tomorrow1126 阅读(791) 评论(0) 推荐(0)

论文阅读笔记exploiting spatial dimensions of latenr in GAN for real-time image editing

摘要：所提出网络框架：目标是使用编码器将图像实时准确地投影到潜在空间，并在潜在空间上局部操作图像用GAN编辑真实图像的缺点是：i）耗时的优化，无法将真实图像投影到潜矢量； ii）或通过编码器嵌入不准确。我们提出StyleMapGAN：中间潜在空间具有空间维度，而空间变异调制取代了AdaIN。与现有的阅读全文

posted @ 2021-11-06 14:10 Tomorrow1126 阅读(138) 评论(0) 推荐(0)

2021年11月5日

论文阅读笔记Designing an Encoder for StyleGAN Image Manipulation

摘要：一、contributions (1)我们分析了StyleGAN的复杂latent space，并对其结构提出了新的看法。 (2)我们展示了distortion扭曲(失真、歪曲、变形)、感知perception和可编辑性editability之间固有的权衡。 (3)我们描述了这些权衡，并设计了两种编阅读全文

posted @ 2021-11-05 19:04 Tomorrow1126 阅读(843) 评论(0) 推荐(0)

latent space隐空间

摘要：自动编码器和生成模型：自动编码器一种基于数据在隐空间的距离训练的网络模型，其目标是输出和输入数据类似的内容，类似于一个恒等函数。上图红色部分即为隐空间。模型首先将数据相关特征储存在压缩表示中，然后准确地重建表示；即先从数据空间映射到隐空间，再从隐空间映射到数据空间。 If I have to d 阅读全文

posted @ 2021-11-05 18:06 Tomorrow1126 阅读(620) 评论(0) 推荐(0)

论文阅读笔记from image to imuge:immunized image generation

摘要：这篇论文提出了一个概念叫做“图像免疫”，意思是对图像进行一定的变换，让它能够在被篡改后可以定位得到它的被篡改位置，并可以恢复出原始图像信息最近几年有很多利用深度学习的图像恢复技术，例如基于GAN inversion的图像重构、image inpainting等等，取得了很不错的效果。但是，基于此类阅读全文

posted @ 2021-11-05 15:16 Tomorrow1126 阅读(134) 评论(0) 推荐(0)

论文阅读笔记Cycle-Consistent Inverse GAN for Text-to-Image Synthesis

摘要：一、contributions （1）我们提出了一种结合GAN反转和循环一致性训练的新颖GAN方法，用于文本到图像的合成。统一的框架可用于文本图像生成和基于文本的图像处理任务。（2）我们使用改进的GAN反转方法和循环一致性训练，将真实图像反转到GAN最新空间，并获得图像的潜在代码（3）我们unc 阅读全文

posted @ 2021-11-05 14:30 Tomorrow1126 阅读(171) 评论(0) 推荐(0)

Tomorrow

公告