《Eye In-Painting with Exemplar Generative Adversarial Networks》论文阅读笔记
2024-09-03 20:05:40
Abstract
基于conditional GAN使用隐藏在reference image中的exemplar information生成high-quality,personalized in-painting results:ExGANs,实验样例为睁眼闭眼。同时提出一个新的benchmard dataset
总体思路
- reference-based in-painting
利用一组成对训练集$X_i$和$r_i$来进行GAN的对抗训练,其中$r_i$是作为X的inference image,如同一角色的不同姿态,表情的图片(r也可以是一组图片)。$Z_i$作为需要inpainting的残缺图片,目标函数定义为:
从形式上来说,和CGAN较为一致,最后加上了一项生成的补全图片和原图片的pixel loss项。
- code-based in-painting
生成一个perceptual code,该code中蕴含了相应的待补全的信息,在本例中为目标的眼睛信息。C是压缩映射函数,大幅降低参考图片$r_i$的信息数量至$C_i$(The compressing function can be a deterministic func-tion, an auto-encoder, or a general deep network that projects an example onto some manifold)
网络pipeline图示:
作者自己从网上爬了2 million 2D-aligned images of around 200K individuals组成训练集,同一人物至少对应3张不同的图片
最新文章
- enumerate()
- Android手机浏览器访问本地网络相关问题
- jmeter 响应结果分析二
- /lib /usr/lib /usr/local/lib 的区别
- AMR音频文件格式分析
- Jmeter性能测试报告扩展
- [Swift]LeetCode971.翻转二叉树以匹配先序遍历 | Flip Binary Tree To Match Preorder Traversal
- 卷积神经网络CNN的原理(二)---公式推导
- jmeter性能测试的小小实践
- ABP集成短信发送模块
- HDU 1879	继续畅通工程(最小生成树)
- php包含那点事情[WOOYUN]
- 用Python3发送邮件详解
- #003 React 组件 继承 自定义的组件
- Task 6.2站立会议一
- cx_oracle 安装和配置
- java.lang.NoSuchMethodError: net.sf.cglib.core.Signature
- QS世界大学排名_百度百科
- vue+django前后端分析解决csrf token问题
- git 使用那些事儿
热门文章
- android应用开发之View的大小计量单位(px、dpi、dp、dip、sp)
- MVP模式是你的救命稻草吗?
- centos的python2.6.x升级到python2.7.x方法;python2.6.x的版本就不要用了
- 【c专家编程】分析c语言的声明
- 【effective c++】定制new和delete
- 数据库系统学习(八)-SQL语言与数据库完整性和安全性
- ubuntu uninstall postgres
- Andriod DiskLruCache的使用案例
- COCOS学习笔记--重力感应Acceleration
- 推断dxf文件的版本号