[ 路丁前言 ] 手机美图秀秀，如今P图增加全新高科技。
一言以蔽之，不服气就GAN（转化成对抗网络）。
不但可以照片模糊、失焦等难题，还能去掉马赛克。
自然，也会随手帮你美肤。
例如，它是一张20年前的照片，广为流传迄今早已越来越模糊不清了。P图后，实际效果是那样的：
照片不是模糊不清了，可是这一美肤实际效果……Emmm
乃至打上马塞克，它也可以让你把肌肤“磨得”相对而言较为整平。
这就是美图照片近期发布的“老照片修复”作用，可以获得那样的实际效果，不仅仅仅靠传统式P图优化算法，还用到了GAN。
用GAN来P图
美图照片的GAN，名叫BeautyGAN，由美图照片影象试验室MTlab产品研发。
关键用以处理照片被缩小，或是夜拍、摄录或者颤动导致的照片模糊或是失焦等难题。
修补一张照片一般分二步：人像图片修补和画质增强。
人像图片修补
人像图片修补大部分对面部开展修补，包含面部裁框和面部转化成修补。
完成面部裁框层面，美图照片放弃了过去单纯性运用双眼间隔来裁剪面部的方法，而选用最少包围盒矩形来裁剪面部，从总体上是那样的：
先用现阶段完善的根据CNN的人脸识别算法和面部两端对齐方式得到 图象中的面部点集，测算另外接矩形框，向外扩展获得面部的裁剪矩形框。
随后根据面部的裁剪矩形框，得到 面部的转动视角，从原照中裁取放正后的面部图象。
面部修补，便是GAN充分发挥的地区。
美图照片详细介绍称，面部转化成存有五官形变、遗失挡住(如手、流海等)信息内容等，造成绝大多数深度神经网络转化成的面部和真正面部存有很大差别，转化成的脸一眼就可以看出去是假的。
还行StyleGAN出現了，使用图象风格迁移能转化成真实面部。但这只不过是转化成，并不可以完成一对一的人脸修复。
以便用StyleGAN，美图照片为其设计方案了一个伺服电机-音频解码器互联网方式。
有人说，在这个全过程中，假如想重复使用伺服电机中的featuremap，保存面部的五官特点，防止产生形变，就必须将其和音频解码器相匹配尺寸的featuremap相互连接。
与过去选用加的联接方式，美图照片选用的是concat的方法，可保存伺服电机构造的一部分featuremap，防止面部比较严重形变或是遗失面部挡住(如手、流海等)的信息内容。
具体的操作流程，是在互联网中，键入一张s x s的图，历经五次下采样，获得一张尺寸s32 x s32的featuremap，再经过5次上采样，转化成一张尺寸为S x S的修复脸部图。
以便进一步提高BeautyGAN的转化成工作能力，美图照片还依靠了StyleGAN的训炼方法。
最先，她们训炼了音频解码器的转化成工作能力，即键入一个尺寸为s32 x s32的任意空间向量，根据逐级的上采样再加concat的任意空间向量，最后转化成一张s x s尺寸的面部，保证转化成的面部看不出来真伪。
所述的音频解码器网络架构便是一个制作器，随后再加辨别器，就组成了美图照片的BeautyGAN。
美图照片表明，直至音频解码器构造训炼平稳具有转化成面部的工作能力后，才会与伺服电机构造合拼，并开展全部网络架构的训炼。
人像图片修补以后，便会进到下一阶段。
画质增强
美团外卖表明，在这个全过程中，屏幕分辨率较为高的照片在开展高清图去噪等实际操作时，较为费时间。
以便提升测算高效率，她们将待修补图变小到一定限度，再开展分层、去噪等修补实际操作。随后根据guided-filter网络架构的画质增强计划方案修复为初始屏幕分辨率。
以后，再运用超分辨率互联网，最后促使画面质量总体越来越更为清楚。
到此，全部图象的解决步骤也就大概一目了然。
美图照片影象试验室MTlab
最终，简易详细介绍下此次技术性身后的美图照片影象试验室MTlab。
美图照片影象试验室（MTlab）创立于二零一零年。2017年宣布单独，总体目标是运用持续总计的图象数据信息，训炼出更为精确的设备优化算法，运用优化算法出示大量服务项目。
现阶段，关键技术服务项目有些人脸技术性、3D技术、身体检验、图象修复、图像增强、增强现实技术、边缘检测、影象转化成、极致美颜、美妆护肤技术性、AI测肤等11项。
依据官网详细介绍，自2016年至今，美图照片影象试验室早已发布20数篇毕业论文，在其中不缺ICCV、ECCV、CVPR等人工智能算法行业的顶尖学术会。并且，在2020年的CVPR和ICCV上的比赛中，也都得到 了有总冠军。
根据MTlab，美图照片在今年4月发布AI开发者平台，对外开放开展解决方法輸出，早已有效联合利华、名创优品、薇女坊、丝芙兰、淘宝网、百度搜索等好几家企业应用。
如今美图照片影象试验室MTlab的责任人是万晓兵，博士毕业于香港科技大学ECE系，大学毕业于我国科技进步高校EEIS系。研究内容关键包含人工智能算法和测算显像。
One more thing…..
還是温馨提醒一下吧。
美图照片这只AI，尽管可以去掉马赛克，但较为重的马塞克，实际效果并不太理想化。
并且也只有除掉人脸部的马塞克，连沸羊羊就不好：
看，压根没啥实际效果……
因此，有胆大念头的朋友们，也不是想GAN就能GAN的。
评论