谷歌P图神器来了！不用学不用教，输入一句话，分分钟给结果
Pine 发自 凹非寺
量子位 | 公众号 QbitAI
当你拍照片时，“模特不好好配合”怎么办？
没事！现在只用一句话就能后期P图 了，还是能改变动作、表情的那种！
比如说你能轻松让鸟张开翅膀（输入“张开翅膀的鸟”即可）：
又或者说，想要让一只站立的狗蹲下：
看起来还真不赖！而这个新的“P图”方法呢，名叫Imagic ，是基于爆火的扩散模型（Diffusion Model）来实现的。
是的，又是扩散模型，它的能耐想必也不用多介绍了吧（那看那铺天盖地和它相关的论文就能佐证）。
那在扩散模型加持下的Imagic到底有何厉害之处，话不多说，一起来看看吧！
多达6种功能
据不完全统计，Imagic的功能就有6种 。
改变姿势、变换构图、切换滤镜、多个对象编辑、添加对象、更改颜色……
先来看看这个P图神器改变姿势 的效果，比如说输入一条站立的狗，通过变换提示文字，得到的效果是酱紫的～
或者说输入一个随意站立的人，输入口令，他就“乖乖听话，任你摆布”（手动狗头）了，甚至还能凭空出现一个水杯。
还没看够？那再来康康Imagic其他功能：改变颜色，或者增加对象，也可以多种功能同时使用。
总的来说，Imagic的厉害之处太多，这里就不一一详细展开了，效果可以看下图。
除了这么多功能之外，Imagic还有另外一个比较人性化的点，就是当你告诉它要如何“P图”后，它会随机生成几个不同的选项供你选择。
其实这种在真实图像上编辑的模型Imagic不是第一个，在此之前就已经有很多个类似的模型。
这时就会有网友问了，“Imagic有什么厉害的点呢？”
话不多说，直接上效果对比。
这里选取了比较常见的基于真实图像编辑的两个模型：SDEdit、Text2LIVE与Imagic作对比。
结果很显然，Imagic完成“P图指令”的效果很好，在细节上也丝毫不逊色其他模型。
（确实妙啊）
那Imagic是如何“击败”SDEdit、Text2LIVE，实现这样的效果呢？
是怎样实现的
千言万语汇成四个字：扩散模型 ，在论文的标题上它都赫然在列。
具体到Imagic中，扩散模型的作用是如何发挥出来的，来看看详细的“P图”过程。
整体来说分为三大步。
第一步 是优化文本嵌入层。
具体来说，先给定输入的图像和目标文本，然后对目标文本进行编码，得到初始的嵌入层。
然后不断调整初始嵌入层，让其能够通过预先训练的扩散模型很好地重建输入图像。
这样一来，最终便会得到优化后的嵌入层（能够很好地重建输入图像）。
第二步 是对扩散模型进行微调，这时就要用到上一步已经优化之后的嵌入层，让嵌入层经过模型后重建输入图像。
在重建的过程，需要不断更改模型中损失函数的参数，以让模型适应优化后的输入层，直到能够很好地重建输入图像时为止，这样一来便得到了微调之后的模型。
第三步 就要开始正式P图了。
值得一提的是，这一步除了输入初始的目标嵌入层（tgt）外，还会插入优化好的嵌入层（opt），它们的关系如下图。
通过变换参数，实际的效果如下图。
如果你想更加详细地了解Imagic，可以戳文末链接阅读论文原文。
研究团队
Imagic的六位作者均来自Google Research，论文有两位第一作者：Bahjat Kawar和Shiran Zada，均来自以色列。
值得一提的是，Bahjat Kawar还是一位以色列理工学院在读博士，他是在Google Research实习期间完成了这项研究。
而Shiran Zada今年5月刚加入Google Research，目前是计算机视觉研究员。
他曾在微软担任软件工程师以及技术主管的职务，主要负责网络安全相关的项目开发。
参考链接：[1]https://arxiv.org/abs/2210.09276[2]https://twitter.com/Buntworthy/status/1582307817884889088[3]https://github.com/justinpinkney/stable-diffusion/blob/main/notebooks/imagic.ipynb
— 完 —
量子位 QbitAI · 头条号签约
关注我们，第一时间获知前沿科技动态
手机版安卓版 Photoshop 是什么样的？
好多PS新手同学在寻找手机版的 Photoshop，并且期望能在手机上，完成所有的图像处理工作。先泼盆冷水，手机版的PS无法完成所有的图像处理工作。手机版的 Photoshop 的特点，主打简单，主打 AI 人工智能，操作都不会复杂，就可以获得十分满意的，甚至很惊艳的效果。比如，调色，制作各种特效，非常简单，非常快速。手机版 PS 十分适合女生自拍，然后快速处理照片，让照片美美的。但对于很复杂的操作，复杂的修改，手机版就无能为力了。就必须使用电脑版的 Photoshop 了。PS 软件下载，免费教程汇总，老师教学，快速学会：https://www.jiaoxue.xyz
建议：如果你只是处理一下自拍，那么手机版就可以满足你的需要了。如果你要P图，改图，作图，那么你必须使用电脑版的。
手机，电脑，分工不同。手机主要是花钱的，电脑主要是赚钱的！
相关问答
m,dm,cm,μm,pm,nm,埃米,pm,fm都代表多少?怎么换算?_作业帮
[最佳回答]m,dm,=10^-1mcm,=10^-2mμm,=10^-6mnm,=10^-9mpm,=10^-12m埃=10^-10m=0.1纳米
有哪些实惠好用的加速器值得推荐?
有很多网友私信我,今天就在这里跟大家聊聊加速器的事情,便宜无好货,好货不便宜1:不论是PC,手游,还是家用机玩家如果要联网必须得用加速器2:加速器分两种...非...
