网易首页 > 网易科技 > 科学探索 > 正文

用iPhone给林徽因拍照会是啥样?满满的现代风

0
分享至

(原标题:用iPhone给林徽因拍照会是啥样?这款“穿越相机”把老照片换成现代风)

如何用iPhone给林肯拍大头照?除了肉身穿越回19世纪以外,你还可以试试这款“穿越相机”。

照相技术发明100多年以来,有无数历史名人留下了黑白照片。然而因为时代不同、技术不同以及岁月的侵蚀,这些历史照片逐渐失真。

能不能用现代相机的风格把他们都恢复原貌呢?

现在,来自华盛顿大学、UC伯克利、谷歌的最新论文Time-Travel Rephotography,将这些照片里的历史人物真实地展现在屏幕上。

比如,居里夫人、爱迪生、林徽因……

放大瑕疵的老照片如何恢复

从黑白照片乃至画像恢复人脸并不是什么新鲜事,比如最近恢复兵马俑、古代帝王的视频在社交网络大热。

但是从古老照片恢复人脸要复杂得多。

我们先看一张著名作家卡夫卡的还原照。Zhang等人恢复的照片粗看起来皮肤上有很多瑕疵,而“穿越相机”恢复的照片似乎自带“磨皮”。

那么是前一张恢复照片更加真实吗?

事实并非如此,卡夫卡脸上的瑕疵是当年底片技术导致的。如果只是简单给黑白照片填色,那么就不能充分表征旧胶片的特性和老化过程。

最早诞生玻璃感光底片只对蓝光紫外光敏感,1873年推出的新感光乳胶也只对绿光和蓝光敏感。

由于他们都缺乏对红光的敏感性,造成了人物脸上的雀斑和皱纹被放大,嘴唇变黑。

所以我们今天来看林肯的原始照片,会发现林肯脸上呈现出很多夸张的皱纹:

1907年,对红蓝绿都敏感的全色底片诞生。所以1913年采用新技术拍摄的潘克斯特(时年55岁),脸部皮肤要干净和平整得多:

因此,恢复这些历史照片不仅要考虑照片的模糊、褪色、噪点、低分辨率等问题,还要考虑不同老照片对颜色的感光差异。

而这款“穿越相机”相比之前的方法,在人物的还原上避免了当时技术造成的失真。

从StyleGAN2出发

对于1873年之前的照片,作者使用了蓝光敏感模型,对于1873年至1907年的照片,手动在蓝光敏感和正色底片之间选择,然后在1907年以后拍摄的照片,则在所有模型中手动选择。

作者利用StyleGAN2框架将旧照片映射到现代高分辨率照片的空间中,从而在统一的框架中实现所有这些效果。

作者使用其他彩色样本图像作为参考,它们与黑白图像具有相似的面部特征,但包含高频细节以及自然色和照明。为了进一步减小输入图像和现代人像之间的感知身份差距,他们还设计了特别适合于老照片的重建损失。

模型的结构如下:

1、同级编码器

以低分辨率灰度参考图像I作为输入,生成具有真实颜色和相似面部特征的同级图像Is。

2、同级颜色和细节转换

为了进一步限制颜色和皮肤细节,使其与同级图像匹配,模型引入了颜色转换损失Lcolor强制StyleGAN2的ToRGB层输出与同级图像的相似性。

3、老照片的重建损失

为了进一步减小输入图像和现代人像之间的感知身份差距,作者特别设计了适合于老照片的重建损失Lrecon,它对老照片的缺陷具有鲁棒性。

4、潜在编码优化

将之前的所有损失函数叠加起来,以此进行优化,生成最终图像Î。

据作者介绍,生成这样一张1024×1024的照片,需要在英伟达Titan X上运行10分钟。

与其他几种恢复老照片的方法相比,“穿越相机”的效果显然有着更真实的观感。

不过,“穿越相机”现在还存在着一些缺点。

首先是对在恢复人物发行与配饰方面存在着错误,或者会丢失细节。

另外,生成照片也非常依赖于统计图像的选择,如果选择了和原照片不一样的种族或性别,会造成黑人变白人、女人变男人。

作者简介

这篇文章作者包括华盛顿大学、UC伯克利与谷歌等学校与机构的6名学者。

其中第一作者是毕业上海交大ACM班校友罗璇,她现就读于华盛顿大学。

她今年还有一篇“水淹食堂”的CV论文,因为惊艳的效果引起了不小的轰动。

从交大毕业后,罗璇选择进入华盛顿大学研究“虚拟视觉”,又先后在迪士尼、谷歌等知名企业实习。

作者在项目主页中表示,“穿越相机”的代码将会很快开源。不过根据“水淹食堂”这篇论文开源的节奏,我们恐怕还要等上两三个月了。

相关推荐
热点推荐
舒马赫妻子再卖8块手表救夫,总价值约400万美元

舒马赫妻子再卖8块手表救夫,总价值约400万美元

红星新闻
2024-04-18 16:27:20
蔡依林太敢穿!透视装不打马赛克不敢看,观众吐槽不知道要看哪

蔡依林太敢穿!透视装不打马赛克不敢看,观众吐槽不知道要看哪

天保影视V3
2024-04-20 07:25:06
降!降!降!价格暴跌!几乎“腰斩”!最便宜的时候即将到来

降!降!降!价格暴跌!几乎“腰斩”!最便宜的时候即将到来

北青网-北京青年报
2024-04-20 09:05:06
新版《成都市物业管理条例》10月1日起实施,业主有权提出物业费调价,车位不得只售不租

新版《成都市物业管理条例》10月1日起实施,业主有权提出物业费调价,车位不得只售不租

红星新闻
2024-04-18 19:18:23
上海出轨张老师曝大量美照,难怪16岁男主挡不住,换你也把持不住

上海出轨张老师曝大量美照,难怪16岁男主挡不住,换你也把持不住

辣条小剧场
2024-02-20 08:00:10
急眼了!广州91:108新疆,郭士强怒骂23岁悍将,旁边小后卫吓傻了

急眼了!广州91:108新疆,郭士强怒骂23岁悍将,旁边小后卫吓傻了

爱中超也爱篮球
2024-04-19 22:20:10
曝汪希玥反感父亲去学校见自己,家丑外扬同学笑,被迫站队不开心

曝汪希玥反感父亲去学校见自己,家丑外扬同学笑,被迫站队不开心

欢乐大意
2024-04-19 19:46:56
我34岁还是处女,新婚夜第一次,他突然掏出一个东西,我两眼发直

我34岁还是处女,新婚夜第一次,他突然掏出一个东西,我两眼发直

小程说娱乐吖
2024-04-20 07:07:04
98年西安女导游讲解兵马俑火上央视!网友:真希望多些这样的导游

98年西安女导游讲解兵马俑火上央视!网友:真希望多些这样的导游

冬天来旅游
2024-04-20 11:19:37
上海六旬阿姨再婚后,想把87岁老母亲赶出家门,“没地方住让国家解决”!

上海六旬阿姨再婚后,想把87岁老母亲赶出家门,“没地方住让国家解决”!

环球网资讯
2024-04-19 19:07:22
中国五大“垃圾”国货全都曝光了!快看看你们用过哪个?

中国五大“垃圾”国货全都曝光了!快看看你们用过哪个?

白宸侃片
2024-04-19 07:30:22
中产阶层破防,“返贫五件套”个个中招,或将催生新中产涌现?

中产阶层破防,“返贫五件套”个个中招,或将催生新中产涌现?

前沿科技学习分享圈
2024-04-19 19:26:27
突发!特斯拉官宣:降价!

突发!特斯拉官宣:降价!

电动知家
2024-04-20 15:00:55
女儿豪车豪宅,晚年自杀5次最终跳楼

女儿豪车豪宅,晚年自杀5次最终跳楼

郑安琪开心果
2024-04-19 16:28:41
DNA双螺旋之父:坚信黑人是未进化人种,智力低下,这算歧视吗?

DNA双螺旋之父:坚信黑人是未进化人种,智力低下,这算歧视吗?

搞笑的阿票
2024-04-19 23:07:08
斯琴格日乐潍坊风筝节惹争议!严重跑调像背歌词,孙楠实力救场

斯琴格日乐潍坊风筝节惹争议!严重跑调像背歌词,孙楠实力救场

裕丰娱间说
2024-04-20 11:08:40
距菲律宾仅80公里,被强占数十年的蓬勃暗沙,我国借“大风”夺回

距菲律宾仅80公里,被强占数十年的蓬勃暗沙,我国借“大风”夺回

吃鱼思故渊
2024-04-19 22:28:34
乌克兰远征军赴非洲与瓦格纳交火,救出苏丹总统,斩断俄黄金链

乌克兰远征军赴非洲与瓦格纳交火,救出苏丹总统,斩断俄黄金链

史政先锋
2024-04-18 23:21:08
出兵帮助俄罗斯打败北约的言论,十分危险且是误国害民

出兵帮助俄罗斯打败北约的言论,十分危险且是误国害民

火星宏观
2024-03-26 07:20:02
第二春!34岁奥巴梅扬本赛季25球10助攻,带马赛挺进欧联四强

第二春!34岁奥巴梅扬本赛季25球10助攻,带马赛挺进欧联四强

直播吧
2024-04-19 23:49:03
2024-04-20 15:54:44

科技要闻

华为今年最关键的事曝光!Pura 70有新消息

头条要闻

上海地铁试点"闸机常开门"首日:有乘客在闸机前愣住

头条要闻

上海地铁试点"闸机常开门"首日:有乘客在闸机前愣住

体育要闻

米切尔这次对线不会输了吧

娱乐要闻

北影节开幕之夜,内娱女星千娇百媚

财经要闻

新华资管香港的秘密:猛投地产或致巨亏

汽车要闻

78.9万的极氪009光辉 让加价MPV无话可说

态度原创

本地
手机
亲子
艺术
公开课

本地新闻

春色满城关不住|千阳春日限定美景上线了!

手机要闻

4月19日OPPO A3 Pro正式开售 京东手机小时达下单 1小时到手新机

亲子要闻

春日美好,和朋友家的小妹妹去玩

艺术要闻

“妮可·巴菲特:疗伤一代”亚洲大展启幕 千禧世代的疗伤之旅

公开课

睡前进食会让你发胖吗?

无障碍浏览 进入关怀版
×