HMS Core媒体领域技术,用AI重温记忆里的父辈爱情
人们都害怕遗忘,为了记录就发明了照相机,定格下值得珍惜的瞬间。
每一代都有自己的芳华时代,你是否在想以前的爱情是什么样的?老一辈的人,习惯将爱意揣进口袋,小心翼翼地珍藏。爱情的仪式感在一张张黑白老照片里封存。
彼时,照相馆的老师傅通常要花费几天时间给黑白照片进行手工涂色。而现在,随着科技的发展,AI技术就可以实现快速还原老照片。
在36氪最新发布的“重温父辈的爱情,揭秘AI还原老照片背后的技术”视频中,讲解了如何利用华为HMS Core视频编辑服务(Video Editor Kit)的AI技术对黑白老照片自动上色并为照片中的人物加上一抹恰到好处的笑容。现在,和AI一起,重温一下记忆里的父辈爱情吧。
(观看视频完整版,欢迎点击下方链接)
链接:https://www.bilibili.com/video/BV1T3411G7PR/
用色彩唤醒回忆
给黑白照片上色经历了纯手工、专业图像软件工具以及现在的AI技术等不同阶段,但原理、方法甚至步骤都相似,就是先对照片上的物体进行分类,根据不同类型物体分别选择合适的颜色加上,但要保证整体画面协调自然。
所以,差别就是背后的科技与数据支持不一样。照相馆老师是根据个人的实践经验;图像处理软件提供套索、魔棒等选择物体工具,以及不同填色工具等,虽然也有知识库支持但仍然要依靠经验,对操作人员要求高;AI着色则是通过机器学习利用大量的数据来训练模型,最终实现自动上色。
视频中以一个苹果图像着色为例。AI算法模型会迅速扫描照片并对照片中的物体进行像素级分割,在判断物体的特征后根据算法模型为其配上合理的颜色。但其实AI并不会针对每个步骤输出结果,而是快速响应、一步到位。
但是对AI着色来说,做到真实自然的上色却也并不容易,训练数据集的多少、算法模型的结构和大小、实际场景多样性等因素都会影响最终的着色效果。
华为HMS Core专家团队通过自研轻量级AI Colorization算法模型,构建百万数据集,以及优化损失函数,最终确保着色的自然程度。
例如,对于业界一些常见的人脸偏红、着色不均等问题,HMS Core通过利用针对性的损失函数对此进行了优化。
为记忆增添笑容
你是否一拍照就略显拘谨、笑容不自然?翻开相册,看起来都像是在被迫营业?
你肯定想,如果能在照片上添加一个适时可爱的笑容,就能展现当时的喜悦了。HMS Core视频编辑服务(Video Editor Kit)的一键微笑能力就可以帮你实现这个愿望。
AI实现一键微笑的过程同样需要三步。首先是抓取照片中的人脸,其次是识别五官和头部姿态,第三是面部属性特征检测。最终就可以在原有表情上增加开心程度了。
但其实人笑的时候需要面部的四十多块肌肉联动才能生成,所以让AI实现自然笑容并不容易。
AI算法模型需要对大量人脸数据集进行训练,人脸数据越多越丰富,就容易得到更自然的笑容。而人脸数据集的采集涉及到用户隐私等多种问题。HMS Core团队基于多年对人脸生成模型的研究,能够利用部分具有肖像权的真实人脸图片,在AI训练数据库生成大量的虚拟人脸特征数据集。比如说,只需利用数千张照片,生成模型就可以得到数百万张不同年龄、性别、种族、面部特征、场景的虚拟人脸特征数据集。
然后,华为自研算法再对数据集中的单张照片生成“开心数据对”即不同开心程度的笑脸;生成笑脸的过程中,可以很好地控制可编辑区域,保证无关区域不做修改,最终挑选出最像你、最自然的笑容。
Video Editor Kit的“一键微笑”功能近期会在华为开发者联盟官网上线,有兴趣的开发者可以接入尝试。
媒体技术创新,让每一个瞬间更精彩
在这个人们对照片质量和要求不断进阶的年代,技术的加持成为趋势所需。
华为HMS Core在媒体领域不断进步,其中视频编辑服务(Video Editor Kit)除了提供视频导入、编辑、渲染、导出、媒资管理等一站式视频处理能力,还有专属滤镜、AI着色、人物追踪等AI能力,功能丰富,稳定可靠,助力开发者轻松高效搭建应用。
HMS生态作为全球Top 3的移动应用生态,一直在征程里不断奋进,为全球移动开发者提供创新开放的技术能力。当前HMS Core已发布应用服务、图形、媒体、智能终端、人工智能、安全、连接与通信在内的7个大领域能力,共有70个kit,相信这些技术能够帮助程序员在高效开发中如鱼得水,不断加速各类应用的创新。开发者可以前往华为开发者联盟官网了解更多详细介绍。
黑白照片尘封记忆,面对镜头笑容尴尬……你是否为此留下遗憾?
AI是如何为黑白图片上色的?
为什么不同公司的AI着色效果参差不齐?
AI是怎么实现一键微笑并确保自然的?
……
所有的答案都可以在36氪发布的“重温父辈的爱情,揭秘AI还原老照片背后的技术”视频节目中找到,快来一起观看,让华为HMS Core专家团队为你揭秘AI自然着色和微笑的奥秘吧!
(观看视频完整版,欢迎点击下方链接)
链接:https://www.bilibili.com/video/BV1T3411G7PR/















