杨净 发自 凹非寺
量子位 | 公众号 QbitAI

你敢信,这样一张沙漠里星河密布的照片,会是手机秒秒钟拍出来的?

而像专业摄影中才有的一些操作,比如白加黑减,如今手机也可以做到。

(白加黑减:在一些过黑or过白的场景中,相机智能系统可能会误认为过曝或欠曝,自动调整曝光度,导致白不是白,黑不是黑,呈现一种掺杂灰色的状态,这时候就需要摄影师手动调整曝光。)

这就是以影像建厂的蓝厂vivo,在最新战略发布会上分享的影像技术,从传感器到算法、自研芯片,从风光到人像……还宛如大型预热现场?!

明示一英寸大底50mm人像镜头、自研芯片AI-ISP架构升级……

有网友评论:要是下一代X90这些技术能放下就好了。


但有一说一,这一次vivo,的确将自己的影像深耕由表及里,由内而外地讲清楚了,还直接摊出自己的秘籍。

这就来带你一文看尽。

vivo如何思考影像技术革新?

通常而言,从技术的维度来看,影像主要有光学、算力、算法三个方面。

具体到用户侧,则涵盖了色彩、夜景、人像、运动、视频等场景去提升体验。

这次vivo直接一揽子发布了7大影像技术矩阵,将其归纳于三个“比肩专业影像”目标当中。

  • 比肩专业影像设备:光学感知系统、臻彩还原引擎、超清画质引擎、算力加速引擎。

  • 比肩专业摄影团队:环境理解技术

  • 比肩专业后期能力:超感人像系统、苍穹夜景系统。

通过这样一个技术矩阵,搭建起真实世界——成像系统——后处理算法的影像通路。

以光学感知系统为例,则包括与蔡司合作的光学模组、镀膜等技术。此次发布会全新发布了一项新技术——VCS仿生光谱技术

据介绍,光线在进入感光元件时会先通过color filter,普通图像传感器的color filter光谱,与人眼差异很大,而要继续优化还原又将影响画质;VCX仿生光谱,就是通过改善Sensor QE光谱,信噪比提升20%和色彩还原能力提升15%,让传感器接收的原始信息接近于人眼。

除此之外,会上还提到将对感光元件做一些“升级”——配置更大底的CMO,比GNV提升了77%。

有细心的网友算了算:一英寸大底没跑了

再以超清画质引擎为例,其典型技术包括光学超分算法

据介绍,手机因为体积限制,会在光学上做出一些妥协,比如潜望摄像头,原始图像经过镜头后会损失约50%的信息。而光学超分算法通过对镜头的缺陷建模分析,可恢复约35%的损失信息。

引擎中还有Denoise、Demosaic、Deblur等模块,经过1亿多次场景训练,深度运算能力较上一代提升了10倍。

而且还透露,为了配合下一代长焦硬件升级,超清画质引擎可对5倍以上的焦段,理论最高提升64%的拍摄解析力。

当然这不过也只是通过拍摄过程进行拆分。

根据具体的场景,vivo还亮出了特有的技术矩阵。

就专业影像而言,场景无非风光、人像、视频以及特定的夜景这几个类别。

不妨就以竞争最激烈、也是最能体现技术实力的人像、夜景为例。

vivo的超感人像系统包括三大核心技术模块:人像理解、人像美化以及人像氛围。

人像理解技术,它可以对人脸进行语义重点和轮廓细节的提取,建立103个特征点的关键人脸坐标;与此同时,还将对皮肤、手势、肢体关键点进行检测,主体分割IOU的精确度达到了96.15%。

人像美化,则是基于去年S12微米级焕肤塑颜技术的升级;还有人像分化融合技术。

在镜头上则是采用50mm人像焦段,还通过深度感知虚化,与蔡司合作还原了多种经典镜头的效果。

苍穹夜景系统也进行了全面的升级,发布上公布了三个全新模型:超感光模型、全分割语义模型和臻彩影调模型。

其中超感光模型,顾名思义,可将感光能力最大提升100%,ISO最高可支持102400。

据说,这样就可以拍到银河了哦~手持星空了解一下。

而为了适应像视频这样对计算处理能力要求高的场景,vivo自研芯片也有更新。

最大的更新,就是架构的升级:从ISP到AI-ISP

传统ISP能以低延时处理大量的数据流水,但只能理解已知、特定的问题;AI-ISP则相当于给传统ISP芯片加个AI大脑——通过硬件直连的方式,将AI计算直接融入ISP Pipeline中,从而实现处理能力、能效的提升。

基于这样的升级,下一代芯片在片上内存单元(每秒1.3万亿比特的峰值数据吞吐速率)、AI计算单元(每瓦16.3万亿次运算的峰值能效比)、图像处理单元*(夜景降噪效果提升20%等)都有相应的突破。

两个影像战略

好了,说到这里vivo也不瞒了,直接公布了自己的影像战(mi)略(ji)。

两大支点:联合创新+自主创新。

联合创新上,vivo与蔡司及上下游厂商,研发更好光学系统。而在自主创新上,则是布局算法和影像芯片的研发,软硬件协同并持续迭代升级。

不管是合作还是自研,目标只有一个——构建底层核心能力,从而得以在影像长赛道上持续深耕。

最后,对于vivo这一波影像秀肌肉,你最期待哪项新技术呢?

「量子位·视点」直播报名

可重构计算架构为何能够成为应对大算力时代的最佳技术路线?目前该架构的落地难点在哪里、落地情况如何呢?

10月27日周四19:00,参与直播,为你解答~

点这里关注我

vivo新机一英寸大底没跑了,还能数秒拍出星空相关推荐

  1. 买5G还是等鸿蒙,华为新机基本没跑了,除了5G之外,鸿蒙系统是最大亮点

    华为新机基本没跑了,除了5G之外,鸿蒙系统是最大亮点 2019-12-18 16:39:16 1点赞 1收藏 1评论 2019年如今也算是将要结束了,而在手机市场上的竞争,也同样逐渐接近尾声了.其中华 ...

  2. 10月份中国发货!华为Mate X这次真的没跑了

    9月19日晚,华为在德国慕尼黑举行了新品发布会,正式推出了备受期待的全新华为Mate30系列旗舰手机,该系列新机采用诸多先进创新技术,发布会过程中数次掀起现场的高潮.而除了主角之外,余承东在发布会上还 ...

  3. 华为p50 pro 鸿蒙,华为P50Pro确认!1英寸大底相机+首发鸿蒙:这才是华为最强实力...

    2月22日,华为发布了折叠屏旗舰华为Mate X2,起步价格高达17999元,创下华为手机价格新高. 按照以往的习惯,华为Mate X2应该与华为P50系列一起发布,只是此一时彼一时,几年前的华为拥有 ...

  4. 华为p50 pro 鸿蒙,华为P50 Pro再曝光,1英寸大底相机+鸿蒙系统,造型夸张!

    按照往年的节奏看,P系列即将要跟我们见面了.有消息称华为P50系列旗舰手机有望在4月17日正式发布. 今年华为的芯片非常稀缺,从最近华为不断推出库存表处理器的新机出来就能感受到了.所以不出意外的话,P ...

  5. java数据跑不出来,6000条数据,java下跑了20多分钟了还没跑完,求教怎么改进

    当前位置:我的异常网» Java Web开发 » 6000条数据,java下跑了20多分钟了还没跑完,求教怎 6000条数据,java下跑了20多分钟了还没跑完,求教怎么改进 www.myexcept ...

  6. 1英寸大底手机来了 是索尼的营销噱头吗?

    上个月索尼的"1英寸大底手机" Xperia PRO-I开启了预售,该机最大的亮点就是搭载1英寸影像传感器.市面上其它手机搭载的影像传感器例如GN2"超大底"传 ...

  7. 华为P50为屠榜而来:搭载超高像素1/1.18英寸大底主摄

    按照往年惯例,华为应该在4月左右就举办上半年代表性的P系列旗舰新品发布会,不过今年由于众所周知的原因,华为的新一代P50系列旗舰的发布时间已经多次延期,最新的爆料显示该机最早有望在7月与大家见面.现在 ...

  8. 想要有设计有格调|这波PSD时尚渐变创意海报模板,没跑

    渐变在平面设计时代有刮来一阵风,这阵渐变风的复出包含了大量平面元素,特别是颜色.渐变中一些最大.最大胆的颜色示例是直接从平面设计调色板中"借用"的色调. 这些颜色选择有助于渐变的现 ...

  9. 【情书加密】,c++花式表白,这样泡小师妹,没跑了。

    [花式表白],情书加密,这样泡小师妹,没跑了. 首先先上效果图. 文件a是初始文本,文件b是由文件a加密而成的.我们发给小师妹的文件可以是b文件.而c文件则是由b文件解密出来的. 其中如果输入错了解密 ...

最新文章

  1. 详解H3C交换机“端口安全”功能
  2. SqlServer2012清除日志文件
  3. poj1028 模拟浏览器后退和前进(栈)
  4. 第四周实践项目6 循环双链表应用
  5. NYOJ 613 免费馅饼
  6. python中不具备np_Python中np.random.multivariate_normal问题?
  7. Postgresql_最新版11.2源码编译安装
  8. 190226每日一句
  9. 2021_0207_生活记录
  10. win10怎样更改系统字体_简单六步,轻松更改Windows系统字体
  11. SQL Server 公用表表达式(CTE)
  12. 设为首页 加入收藏 html,js设为首页和加入收藏代码(兼容所有浏览器)
  13. 7.物理地址(MAC地址)是什么?
  14. eq, neq.gt,ge,lte,lt,not,mod的含义
  15. 读王弼之《老子道德經注校釋》
  16. leetcode 306 累加数(js)
  17. android APP闪退后如何屏蔽自启动
  18. Stata:DID入门教程
  19. 一个桌面弹幕软件,用来记单词刚刚好
  20. idea扫描过时方法

热门文章

  1. [Java8] lamda表达式及Stream API一览
  2. 信号反射与反弹图那些事
  3. Y400安装windows7系统遇到的问题
  4. vue 对象判断为空_Vue中可用的判断对象是否为空的方法
  5. android 三段式加密,国密算法技术安全芯:海信推出全新金盾手机,7月7日预约...
  6. Python 【惠头条】短视频的自动上传与发布实例演示,同时支持抖音、快手、哔哩哔哩、小红书、微视、西瓜视频、视频号等平台的视频自动化同步发布
  7. 如何在Mac上的 iMovie 剪辑中添加音频效果?
  8. [原理解析] Adaptive Hash Index 是如何建立的
  9. 小龙虾有寄生虫?煮熟了就没事
  10. vuejs项目前端纯js在线下载网页内容保存为自定义格式的word文件、另存为word文件