本文为LiveVideoStack对联捷科技研发总监周小鹏的邮件采访整理而成,探讨了FPGA与CPU和ASIC的优势与不足。对于用户而言,FPGA在云端应用兼顾了速度和灵活性。未来,联捷科技考虑对更多图片和视频Codec支持。在LiveVideoStackCon2019上海音视频技术大会上,周小鹏将详细介绍FPGA异构计算在多媒体处理中的应用。

文 / 周小鹏

整理 / LiveVideoStack

LiveVideoStack:周小鹏你好,简单介绍下自己的工作经历,以及在联捷科技负责的工作内容和感兴趣的技术方向。

周小鹏:从事FPGA和系统开发有10年时间,大概有7年时间是从事多媒体方面的应用和开发。在联捷科技主要负责FPGA加速的整个后台开发,感兴趣的方向包括多媒体处理和FPGA异构计算。

LiveVideoStack:能否简单介绍下联捷科技,其核心技术和服务的业务场景是?

周小鹏:联捷科技的核心技术是基于FPGA的多媒体加速处理,主要的业务场景是图像转码、图像处理、视频转码。

LiveVideoStack:我们知道相对于ASIC而言,FPGA拥有更好的灵活性,可以针对客户需求进行优化。能否从一线的FPGA技术专家的角度,介绍下FPGA的优势与不足?

周小鹏:FPGA的开发相对于ASIC来讲开发难度要低一些,另外,现在FPGA的开发也有一些高层建模的技术出现,来提升开发效率。FPGA的优势主要是可以实现深度流水和混合数据指令流,来实现计算加速,另外FPGA还有丰富的接口,也能给应用带来系统级的整合好处。不足的地方是,FPGA的开发效率还是比CPU低,另外应用生态不够健全。

LiveVideoStack:FPGA对于主流的图像、视频处理框架或库(比如FFmpeg,OpenCV等)支持的如何?

周小鹏:FPGA本身没有支持这些主流框架和库,这就是我们现在做的工作。

LiveVideoStack:对于一名视频工程师而言,基于FPGA的设备做应用开发(比如使用FFmpeg转码),和在x86平台上实现有什么区别?开发难度是否更高?

周小鹏:对于应用工程师而言,没有区别。我们会把FPGA的加速细节屏蔽,我们会把FPGA加速功能,在软件层做成FFmpeg的plugin。

LiveVideoStack:您如何看FPGA在图像、视频处理领域的未来?一些ASIC实现了更好的图像处理画质,由于ASIC天然的低功耗、高效率等优势,FPGA的优势体现在哪里?

周小鹏:图像、视频处理的应用场景其实很多,ASIC和FPGA应该都会有各自使用场景。比如,在端侧,低功耗、高效率是必须的,ASIC会是更好的选择。而在云端,除了性能要求高,更看重灵活性,这点FPGA比ASIC更容易达到。

LiveVideoStack:Codec呈现出群雄争霸的局面,联捷的产品支持了哪些Codec?未来考虑或计划支持哪些新的Codec?

周小鹏:当前图像支持了JPEG、WebP、HEIF之间的互转,还有Lepton等用于无损存储的Codec;视频支持H.264、H.265。未来也会考虑支持AV1,AVIF,AVS2等。

LiveVideoStack:最后,能否剧透下你在LiveVideoStackCon2019上海音视频技术大会上的分享?

周小鹏:主要是分享我们在产品开发和推广中的一些问题和解决方法。

点击【阅读原文】或扫描图中二维码了解更多LiveVideoStackCon 2019 上海 音视频技术大会 日程信息。

周小鹏:努力让FPGA支持更多开源库和框架相关推荐

  1. 专访 MindSpore 黄之鹏:围绕社区,探索开源深度学习框架的真正价值

    随着智能产业的发展日趋成熟,大量企业在奔赴智能化升级的前线,深度学习方兴未艾,深度学习框架也开始为更多开发者所知.其中佼佼者如TensorFlow.PyTorch.MXNet等已经获得了大量的关注,而 ...

  2. WebStorm添加外部js库(以支持更多的库)

    在使用webStorm进行前端开发时,以CDN的形式(<script src="https://cdn.jsdelivr.net/npm/vue/dist/vue.js"&g ...

  3. 最终幻想:探讨小鹏G9 800V 高压动力系统和架构路线

    大家好,我是LEON. 今天和大家分享的是小鹏G9的高压系统. 更多内容请关注:点击关注 1 G9配置介绍 在分享之前,先和大家快速介绍下G9的价格配置:售价区间为 30.99-46.99 万.续航覆 ...

  4. 人生的路,每一步都算数(逆袭王---周小顺)

    人生的路,每一步都算数 1 周小顺是逆袭之王. 2 有一回,台湾友人Lydia吐槽他们的基础教育,拿出了一张在台湾热传的图片. 我感叹:果然是海峡两岸一家亲! 好多人义愤填膺:愚蠢的应试教育,落后,死 ...

  5. 对话吴新宙:技术演进和商业价值并重,这里有小鹏汽车的自动驾驶路线图...

    在造车新势力当中,小鹏汽车对于自动驾驶是非常重视的. 重视的体现之一,就是对于自动驾驶人才的大力延揽.先有原特斯拉AutoPliot Machine Learning Tech Lead谷俊丽加盟小鹏 ...

  6. 对话吴新宙:技术演进和商业价值并重,这里有小鹏汽车的自动驾驶路线图

    在造车新势力当中,小鹏汽车对于自动驾驶是非常重视的. 重视的体现之一,就是对于自动驾驶人才的大力延揽.先有原特斯拉AutoPliot Machine Learning Tech Lead谷俊丽加盟小鹏 ...

  7. 为何亏损还要烧更多的钱?这次何小鹏说清楚了

    出品 | 新浪科技 ID:techsina 文 | 新浪科技 华子 编辑| 韩大鹏 造车三兄弟中最晚在美股上市的小鹏汽车,却最早回到了香港主板上市. 7月7日,小鹏汽车正式在港交所主板上市.发行价为1 ...

  8. 马斯克爆料Twitter裁了八成员工;OpenAI CEO:GPT-5根本不存在;小鹏被曝年终奖打0.5折 | AI一周资讯

    来源: AI前线  微信号:ai-front 整理 | 凌敏 微软宣布开源 Deep Speed Chat:消息称软银旗下 Arm 启动赴美 IPO:国家网信办出台生成式 AI 管理办法:前理想 AI ...

  9. 小鹏汽车遭多地车主维权 要求退车 孙宇晨:个人拿1000万支持维权

    最近的小鹏汽车很是波折丛生.这边旗下员工曹光植被前雇主特斯拉起诉窃密,小鹏汽车也备受质疑,另一边多地车主对小鹏汽车发起维权. 日前,小鹏汽车刚刚发布了2020款小鹏G3 ,但正是这刚发布的新款让许多车 ...

最新文章

  1. 如何给变量取个简短且无歧义的名字
  2. 元学习Meta learning深入理解
  3. ACCV2020国际细粒度网络图像识别冠军方案解读、经验总结
  4. IDEA的GsonFormat插件--将json字符串直接实例化成类
  5. java,验证码base64编码到json字符串出显数据一行一行的问题,关于base64编码函数解释
  6. (*长期更新)软考网络工程师学习笔记——Section 4 物理层的其它知识
  7. 手把手教你理解卷积神经网络
  8. php7 提示500错误解决,升级php7出现500错误怎么办
  9. SAS笔记(2) RETAIN语句
  10. 冒泡排序法 - python版详解
  11. python三本经典书籍-关于 Python 的经典入门书籍有哪些?
  12. 前端vue的基础使用模板
  13. 中国智能汽车行业市场需求趋势与发展战略规划建议报告2022-2028年版
  14. Java项目:校园二手交易平台(java+SSM+Thymeleaf+Html+jQuery+mysql)
  15. 【HTMLCSS】运维、后端你该会的前端基本内容
  16. 微软亚洲研究院 可视化_如何为亚洲市场本地化手机游戏
  17. oracle 控制文件 dump,将控制文件dump出来研究下内容
  18. linux音频文件格式转换,在Ubuntu @ Linux 中音频和音乐文件的格式转换
  19. 按需视觉识别:愿景和初步方案
  20. Bmob+Luban(鲁班)压缩图片实现相册选择图片压缩后上传到Bmob后台Glide加载图片显示到本地

热门文章

  1. # JavaScript中的执行上下文和队列(栈)的关系?
  2. Material Design 组件之 CollapsingToolbarLayout
  3. 如何使用验证控件对DropDownList进行验证
  4. HBase Replication源码解析之HLog读取
  5. Hql中使用in参数
  6. memset函数具体说明
  7. Daily scrum[2013.12.07]
  8. 服务器软RAID和LVM的实现
  9. $@等特定shell变量的含义
  10. 常用递归结构数据表,返会指点节点,跟其子节点的操作