快手科技——Animoji

演讲者：快手科技李岩
摘录——机器之心

我们知道视频是视觉、听觉、文本多种模态综合的信息形式，而用户的行为也是另外一种模态的数据，所以视频本身就是一个多模态的问题，再加上用户行为就更是一种更加复杂的多模态问题。所以多模态的研究对于快手来说，是非常重要的课题。
2D 图像驱动 3D 建模实现 Animoji 效果

通过苹果的发布会，大家应该都了解 Animoji 这项技术，iphoneX 有一个标志性的功能，就是通过结构光摄像头实现 Animoji，现在国内手机厂商也越来越多地采用结构光的方式去实现 Animoj。而快手是国内较早实现不使用结构光，只用 RGB 图像信息就实现 Animoji 效果的企业。

用户不必去花上万元去买 iphoneX，只要用一个千元的安卓手机，就可在快手的产品上体验 Animoji 的特效，从而能够在不暴露脸部信息的同时展现细微的表情变化，例如微笑、单只眼睛睁单只眼睛闭等，让原来一些羞于表演自己才艺的人，也可以非常自如地表达。我们觉得做技术有一个非常快乐的事情，就是让原来少数人才能用的技术，变得更普惠。

其实解决这样一个问题是非常难的，因为即使是像苹果这样的公司，也是采用了结构光这样配置额外硬件的方式来解决。想让每一个用户都能享受到最尖端的技术，快手面临着硬件的约束，只能通过 2D 的 RGB 视觉信息对问题进行建模、求解，这里面包括了像 Landmark 人脸关键点检测、实时重建人脸三维模型等技术，把 2D 和 3D 两种不同模态的信息做建模、做对齐。

我们也能看到现在市场上可能有一些小型的 APP 在做类似的事情，但体验很差，而我们的整体体验还是非常好非常流畅的，这也需要归功于深度神经网络模型的量化，通过压缩和加速解决手机性能问题，可适配任意机型。

快手科技——Animoji相关推荐

宿华卸任快手CEO程一笑接替；新思科技扩大与台积公司的战略技术合作 | 全球TMT...
国内市场快手科技宣布董事会已同意公司联合创始人宿华辞去首席执行官一职,并已批准联合创始人程一笑担任该职务,自2021年10月29日起生效.宿华将继续担任董事长.执行董事.薪酬委员会委员,负责制定公司 ...
快手前AI核心人物李岩创业，已成立AI公司“元石科技”
1.快手将于3月29日公布2022年第四季度及全年业绩新榜讯近日,快手科技宣布,将于2023年3月29日(星期三)在香港市场收市后公布其截至2022年12月31日第四季度及2022年全年业绩.公司 ...
阿里、京东、快手、华为......他们是如何构建一个个推荐系统“帝国”的？
推荐系统在人们的日常生活中随处可见,成为我们生命中不可或缺的一部分.作为当今应用最为广泛和成熟的 AI 技术之一,它是信息生产者.传播者与用户之间的桥梁,可以让信息最精准.最高效地到达需求不一的用户面 ...
AI一分钟 | 网信办暂停快手、火山小视频算法推荐功能；无需人类司机，加州将允许自动驾驶汽车接送乘客
整理 | 费棋一分钟AI 据加州公共事业监管机构表示,它们将允许自动驾驶汽车接送乘客,且无需配备人类司机. 有知情人士透露,亚马逊公司正在考虑是否通过 Alexa 语音助手提供个人对个人的支付 ...
2019全球AI文创大赛正式启动，AI科技赋能新文创
6月25日下午,2019全球AI文创大赛(GAAC)在清华大学召开启动仪式新闻发布会. 2019全球AI文创大赛由清华大学文化创意发展研究院.清华大学人工智能研究院.清华大学艺术与科技创新基地.艺评网 ...
老铁 666！快手上市暴涨 200%，超 4000 员工成为千万富翁
整理 | 王晓曼出品 | 程序人生 (ID:coder _life) 2月5日,短视频平台快手科技正式在港交所挂牌上市,股票代码为1024,开盘价为每股338港元,较发行价的每股115港元高出193 ...
Netflix测试有线电视频道、字节11亿入股掌阅、快手香港IPO、王者荣耀日活破一亿等｜Decode the Week...
Decode the Week≠音视频技术周刊 Picture from LiveVideoStackCon 2020 Beijing News Briefing 1. 字节跳动一亿七千万美元入股掌 ...
专访快手传输算法负责人周超博士：LAS标准的推出离不开信念感
6月21日,快手正式对外发布基于流式的直播多码率自适应标准LAS(Live Adaptive Streaming),用于提供低延迟.平滑.流畅的直播多码率体验.LAS的端到端解决方案同时开源,包括服务 ...
快手2021年营收810亿元经调整净亏损188亿元
快手科技近日发布截至2021年12月31日止年度业绩公告,财报显示,2021年快手总收入810.82亿元,同比增长37.9%:毛利340.29亿元,同比增长42.9%:年内亏损780.77亿元,同比减 ...
快手宣布任命金秉为首席财务官向程一笑汇报
昨日晚间,快手在港交所发布公告,宣布任命金秉为首席财务官(CFO),向CEO程一笑汇报,即日生效.原CFO钟奕祺宣布退休,并自即日起出任公司高级顾问,为期两年. 快手科技董事长宿华.CEO程一笑通过邮 ...

快手科技——Animoji

快手科技——Animoji

快手科技——Animoji相关推荐

最新文章

热门文章