轨范员们 快把这款AI“魔法”做到手机相机里

2022-06-01 15:14:26 来源:网络

这位胖友,你听说过“镜头恐惧”吗?

包括但不限于,总是尽力躲避镜头,即使拍照也往往表情尴尬,笑不出来。

那感觉,就是人家拍照是回眸一笑百媚生:

我一上相就是“我是谁”、“我在哪”、“我在干什么”灵魂三连。

现在各种算法技术这么发达,就不能我往镜头前一站,相机自动帮我微笑到位吗???

真别说,本老镜头恐惧症患者仔细查了查,发现这事儿还挺靠谱。

比如前面这张阮玲玉露齿而笑的照片,原片其实长这样:

嘴角这么一扬,老照片里的清冷美女,是不是就多了一些鲜活的妩媚温柔?

再看林徽因和她的表姐妹们,微笑加持,少女的天真本性就仿佛透过照片穿越了时代。

关键是,AI这一手微笑P图,着实是P得行云流水不着痕迹。

不仅嘴角上扬,连带苹果肌的变化也刻画到位,细节拉满。

此刻的我只想说:

妈妈再也不用担心我拍照不会笑

不过说实话,从技术的角度来看,虽然现在的各种AI“P图”大法百花齐放,真要自己手动实现一个,麻烦事儿属实不少。

以这个“一键微笑”为例,别看只是一个微笑的动作,背后涉及的算法环节就包括:

人脸检测

面部关键点识别

面部属性识别

目标表情驱动

……

而具体到细节,关键的一步,就是要把人脸图像分割成高度精细的语义块,使得图像与像素级语义分割相匹配。

只有经过类似这样的操作,才能让表情编辑与人脸本身的状态相贴合,达到真实自然的效果。

还有一重难点在于数据集

一键微笑背后的算法模型最终效果好不好,很大程度上依赖于人脸数据集的构建。

数据集中包含的人脸越多越丰富,AI算法就能学到越多的人脸特征,提高输出结果的精准度。但人脸数据集的获取又往往涉及到用户隐私等多种问题,较难采集。

但桥豆麻袋,我也不是在为难各位攻城狮,因为这事儿啊,也不是没有现成的捷径可以走。

开头的这么一套AI“魔法”,其实就是我最近了解到的华为HMS Core提供的AI“一键微笑”功能。

所谓HMS Core,官方说法是华为终端云服务(HUAWEI Mobile Services)开放能力合集。

简单翻译一下,就是一个给移动端开发者们提供各种App基础应用服务,以及图形、媒体、AI等一系列算法能力的平台。

其中媒体领域的视频编辑服务(Video Editor Kit)提供了专属滤镜、AI着色、人物追踪等多种AI能力。而一键微笑能力正是来自于此Kit能力。

对于开发者们而言,这便意味着,不用费力调教模型,仅需几行代码,简单接入华为HMS Core开放的SDK,就能低门槛地复制同款AI“微笑魔法”。

可以看到,基于面部识别算法以及数据集的优化,与FaceApp等相比,Video Editor Kit的微笑处理偏合理含蓄,微笑自然且不会改变原本人脸的合理结构。

HMS Core研发团队依托自研的人脸生成模型,结合算法利用部分真实人脸图片,生成大量的虚拟人脸图片来训练微笑模型,比如可以基于数千张具有肖像权的人脸图片,生成百万张虚拟人脸数据集。然后再利用自研算法模型,从人脸数据集中生成了“开心数据对”,也就是一系列的笑脸。最终,从中选出更符合原图人脸面部状态、更自然合理的微笑。

Video Editor Kit的“一键微笑”功能近期会在华为开发者联盟官网上线,有兴趣的小伙伴可以尝试下~

除了赋予照片中人自然微笑的能力,Video Editor Kit在处理老照片时,还展示了另一重AI能力:AI着色。

与此前火爆外网、成为老照片修复界标杆的MyHeritage相比,来自华为的AI着色风格强调的不是“复古感”,而是更贴近真实生活。

△左为华为Video Editor Kit,右为MyHeritage

左为华为Video Editor Kit,右为MyHeritage

据了解,Video Editor Kit的AI着色是通过设计轻量算法模型、构建百万数据集,和优化调整训练方式,来让照片着色更自然。

另外,相对而言,Video Editor Kit的AI着色赋予老照片的色彩饱和度更低一些,更便于后期处理。

复杂算法一个SDK就搞定,应用开发超简单

这里咱们就以AI着色为例,看看在自己App中集成HMS Core的AI能力,需要经过哪些步骤。

首先,你需要在华为开发者联盟网站上完成实名注册。

第二步就到了集成HMS Core视频编辑服务(Video Editor Kit)的视频编辑原子能力SDK。该SDK不仅提供导入、编辑、渲染、导出、媒体资源管理等一站式视频编辑能力,还涵盖了多个AI算法能力接口,可根据业务场景灵活选择。

在快速集成SDK之后,只需要增加几行代码就可以调用AI着色能力,轻松实现图片和视频处理的AI智能化:

除了详细的开发指南之外,HMS Core官网还提供了Codelabs、服务教程和开发实例,帮助开发者快速集成SDK,进一步降低了应用开发的门槛。

需要说明的是,视频编辑服务(Video Editor Kit)的SDK不仅支持华为手机,也支持非华为设备,具体版本要求如下。

另外小小地提醒一下:人脸算法千万条,安全守法第一条。大胆的想法,还是收一收吧~

降低开发门槛的“基座”

看到这里,你是否有些跃跃欲试了呢?

简单接入SDK即可获得复杂的AI算法能力,对于App的开发者们而言,技术层面的顾虑减少了,自然可以投入更多的精力和时间去丰富创意。

而对于咱们吃瓜群众来说,这也就意味着,你能在HMS Core里找到的开放能力,都能在各种App里,以各种好玩的创意形式直接体验到。

实际上,无论是安卓还是iOS,各自生态内类似的“基座”,如今都已是大势所趋。

谷歌的GMS Core也好,苹果面向开发者的各种Kit也罢,都已证明其在各自生态内,推动中小应用开发者创意落地的价值所在。

而这种应用的繁荣,反过来也进一步为安卓、为iOS获得了更多用户的好评、吸引了更多优秀的开发者。

作为全球Top 3移动应用生态的HMS,同样在这条“基建”之路上探索已久:

在去年HMS Core 6正式发布之时,华为官方的数据就显示,其开放能力已覆盖应用服务、图形、媒体、智能终端、人工智能、安全、连接与通信在内的7个领域,总共70个Kit能力。

截至2022年Q1,HMS生态中的开发者数量,已经超过540万。

可以说,华为搭起了台子让移动应用开发者来唱戏,相当于是在移动应用生态里构建起了一套全新独立的基础设施。

并且不仅面向HarmonyOS,HMS Core也支持安卓和iOS的应用和服务开发。同时也在平板、智慧屏、智能手表及车机等更多智能终端上布局。

更重要的一点是,作为手机软件能力之基,HMS被推至台前,或许也可以看作是华为将多年积累的创新能力宝藏分享给了全球的应用开发者。

,轨范员们你的样子歌词 快把这款AI“魔法”做到手机相机里

相关:

800W恐怖功耗!Intel官宣下一代加速卡AMD Instinct MI250X加速卡已经杀入全球超算500强,并撑起了第一名“Frontier”,也是第一台公开的百亿亿次超算。Intel也与美国能源部有合作,利用其首款加速卡Ponte Vecchio打造百亿亿次超算“Aorura”,据说最大性能可以超过2百亿亿次,很快也就要上线了,11月份的下一次榜单应该就能看到。现在,Intel又迫不及待地宣布了下一代加速卡,代号“Rialto Bridge”(意大利威尼斯里亚托桥)Rialto Bridge将会采用Intel IDM 2.0..

字节跳动将音乐检索速度提高8倍,多篇论文入选语音顶会编辑 | ZeR0智东西6月1日报道,近期,字节跳动火山语音团队的最新音乐检索系统ByteCover2入选了国际语音技术领域顶会ICASSP 2022。该系统主要面向音乐信息检索(MIR)领域的重要任务之一——翻唱识别(CSI),通过表征学习方法让其具备提取音乐核心特征的能力,并且该特征能够对种类繁多的音乐重演绎具有良好的鲁棒性,检索速度提高8倍。经Da-Tacos数据集上的评估,其准确率远超其他方案的SoTA性能。除了ByteCover2,字节跳动..

苹果手机下探至四千多元 空前低价能否横扫友商图片来源@视觉中国文|锦鲤财经坐等手机降价的王琦,抛弃了已经看好的手机,转身投入到了抢购iPhone 13的队伍,特别是赠送充电头、1001元的代金券、分期免息……让王琦终于不再纠结选择哪一款手机,而是直接等待下单。京东和天猫的活动势均力敌,在京东抢不到的用户,准备蹲守天猫的开卖时间,可以说,不喜欢换手机的年轻人,再一次被点燃了购物热情。价格是手机失去宠爱至关重要的原因,一旦降价,年轻人依旧趋之若鹜。日前,..

威马站在峭壁之上位于上海中建锦绣广场1号楼的威马汽车总部已经拖欠了很多物业费(图片来源:网络)今天,2022年6月1日,威马终于向港交所提交了招股书,海通国际、招银国际及中银国际为其保荐人。威马汽车创始人、CEO沈晖与王蕾夫妇持股30.82%,“控制表决权30%以上”;雅居乐集团持股6.46%,百度持股5.96%。招股说明书显示,截至2021年12月31日,威马汽车累计交付电动汽车83485辆。其中,2021年全年累计交付44152辆电动汽车,实现了96.3%的同比..

太华侈!一枚比特币所耗电力可供一个印度家庭使用一年IT之家 6月1日消息,CryptoMonday 近期发布了有关 BTC 比特币挖矿的数据。该网站得出的结论是,由于电费上涨,矿工的收入继续下降。该网站估计,超过 75% 的 BTC 矿工收入用于支付电费。CryptoMonday 表示:“BTC 挖矿是一个非常耗电的过程。一项研究表明,单笔 BTC 交易消耗大约2165千瓦时的电力。这相当于一个典型的美国家庭 74 天的使用电量!再加上普通家庭支付大约0.14美元 / 千瓦时,支出的规模就变得很明..

心理期上茅厕太频仍被辞退 职场女性太难了近日,广州市民林女士在试用期即将结束之际遭就职公司辞退,理由竟是一次直播活动过程中她上厕所太频繁。她对记者解释,活动当天正值她的生理期,去厕所是为了换卫生巾。目前,她已经提起劳动仲裁。其实关于职场的纠葛,外人凭单方面描述也很难做出是非判断。从公司的回应看,也说林女士存在工作不积极,工作时间化妆、外出打电话等问题。所以,舆论从现有信息来“站队”一方,恐怕都不够客观。这也是为什么需要劳动仲裁的原因,..

UP主消逝踪半年自曝被拐遭凌虐 官方:虚构履历,永远封号极目新闻记者 丁伟此前,哔哩哔哩网站一名UP主发布视频曝料,称自己被拐卖给了一名中年女子,而且被拐期间曾多次遭受凌辱虐待,引发网友热议。5月31日晚,哔哩哔哩网站官方发布消息称,其所属MCN机构已通过当地警方查实该UP主被拐卖经历为虚构,这种为博取流量恶意消费用户情绪的行为,干扰了社区正常秩序并带来严重不良社会影响,将对其账号予以永久封禁。UP主自曝被拐卖半年遭虐待5月21日,哔哩哔哩网站一位名为“柏凛Porin”..

24家新闻单元、353名新闻记者因涉嫌违法违规被暂缓核验新华社北京6月1日电 根据《新闻记者证管理办法》有关规定,2022年1月中旬至4月下旬,国家新闻出版署组织开展了2021年度新闻记者证核验工作。近日,国家新闻出版署通报了年度核验有关情况。这次年度核验采取自下而上方式,由新闻单位及其主管主办单位、省级新闻出版管理部门按照分级管理、属地管理原则逐层逐级开展,重点核验持证新闻记者是否具备法定条件、是否遵规守法等情况。截至4月30日,全国3676家新闻单位、180075名新闻..

日本外相林芳正传染新冠日本外相林芳正(资料图)海外网6月1日电 据日本时事通讯社1日报道,日本外相林芳正感染新冠病毒。当天早些时候,林芳正出现发热等症状,并在东京医疗机构进行核酸检测,确诊为阳性。林芳正目前已取消当天的相关工作安排。(海外网 吴倩)

日媒:日本外相林芳正传染新冠海外网6月1日电 据日本时事通讯社1日报道,日本外相林芳正感染新冠病毒。当天早些时候,林芳正出现发热等症状,并在东京医疗机构进行核酸检测,确诊为阳性。林芳正目前已取消当天的相关工作安排。