根据Gartner的报告,今天91%的数据是在中心化的数据存储中心做计算。但是,截止到2022年,全世界74%的数据将在端侧进行分析和计算。

有一种误解是边缘计算会取代云计算,相反,边缘+云计算的结合会是未来的主趋势,边缘计算甚至会进一步带动云计算的发展。把规模的数据计算一定是在云端处理,而与直接数据产生者相关的部分计算会被分配到端。接下来就具体分析下端侧计算的一些优势:

1.数据隐私性

个性化推荐等业务越来越被普遍应用到广大APP中,其本质是对用户行为数据的收集,并在云端进行统一分析。这种AI服务在给人们带来便利的同时,也带来了数据安全问题,很多国家开始出台法令限制用户数据的收集。边缘计算的引入可以允许用户数据不上传,只在用户自己的手机端侧进行分析。这样既能保证数据隐私性,又能同样满足个性化推荐等业务需求。

2.时效性

目前大部分AI服务需要采集数据到云端的数据存储中心进行统一建模,然后将模型部署成Restful服务供终端调用。这种模式因为数据传输的带宽限制以及网络通信的时延限制,往往会影响服务的时效性。如果数据分析建模等服务发生在端侧,就避免了大量的数据传输和网络时延等问题。

3.负载平衡

传统的AI service完全依赖于云端服务,因为每个终端侧的请求有波峰、波谷的差别,在请求波峰阶段可能会受限于云端服务侧性能,这个时候就需要做一些负载平衡,端侧服务就可以很好地解决这个问题。当云端服务能力不足的时候,端侧可以做一些弥补。一些极端情况,比如突然断网,云端服务完全失效,这时候因为端侧的模型服务还在,也可以暂时解决一部分AI模型inference的问题。

Edge AI的一些问题:

1. 计算力问题

众所周知,分布式计算(俗称云计算)主要解决的就是计算力问题,而将计算任务下发到端侧,可能会受限于端侧的内存、磁盘大小的问题,导致只有小规模的模型产出。

2.端设备多样性问题

端侧设备各式各样,比如手机、手表、音箱、汽车。里面使用的操作系统也极为丰富,可能有Anroid、Linux、IOS。在框架层可能是TF或者PyTorch。底层计算芯片也有各种版本,比如英伟达就为不同的终端定制了不同类型的芯片设备,比如为汽车定制的NVDIA Drive Orin。

如何在这么多设备的变量因素之下,找到一条普适性的模型训练模式,是比较有挑战的。

AI新浪潮:截止2022年,全球74%的计算将来自端侧相关推荐

  1. 中国AI专利申请量占全球74%,腾讯、百度、OPPO前五

    4月10日至12日,被誉为"中国智能科学技术最高奖"的吴文俊人工智能科学技术奖十周年颁奖盛典暨2020中国人工智能产业年会在北京和苏州同期举办.期间,中国人工智能学会吴文俊人工智能 ...

  2. 5G时代下端侧AI势必大火!阿里技术专家在线解读

    嘉宾|吕承飞(吕行) 出品|InfoQ&阿里巴巴新零售淘系技术部 嘉宾简介:吕承飞(花名:吕行),阿里巴巴资深无线开发专家.2013 年加入淘宝,经历手机淘宝超级 App 技术演化完整过程,主 ...

  3. 嵌入式如何与AI相结合,什么是端侧AI~

    大家好,周末愉快,最近和朱老师聊,作为嵌入式工程师,为什么需要关注一下端侧AI呢,和大家分享一些感悟. 什么叫端测AI?这个问题搞清楚之前,大家必须要去了解我们整个计算机行业的一个系统架构,它的发展方 ...

  4. 2022科大讯飞全球1024开发者节科技共创,AI创新正当时

    数字经济已成为重组全球要素资源.重塑全球经济结构.改变全球竞争格局的关键力量.作为数字时代的核心引擎,人工智能正持续推动数万亿数字经济产业转型升级. 引领时代浪潮,科大讯飞全球1024开发者节,以AI ...

  5. AI新基建如何构建?浪潮给出了一个答案

    作者 | Just 出品 | AI科技大本营(ID:rgznai100) 伴随生产力升级,社会基础设施也正在发生变化.而智慧时代的新型基础设施,要能够对外提供各种算力服务.数据服务和AI服务.浪潮认为 ...

  6. 登顶AI服务器全球第一后,浪潮发布AI系统浪潮元脑

    雷刚 假装发自 上海  量子位 报道 | 公众号 QbitAI AI汹涌,时代转关. 这已一次次被证明. 而且天道轮回,疆界重构,也见怪不怪. 但当浪潮开放AI系统,推出浪潮元脑,还是不得不令人感慨时 ...

  7. 新升级,新格局 |2022(第三届)全球数字经济产业大会9月盛大来袭!

    围绕"十四五"规划发展目标,构建以数据为关键要素的数字经济,贯彻创新.协调.绿色.开放.共享的新发展理念,进一步推进数字产业化.产业数字化,引导数字经济和实体经济深度融合,坚定支持 ...

  8. AI:2020年6月23日北京智源大会演讲分享之AI创业专题论坛——10:00-10:30张亚勤教授《智能产业新浪潮》

    AI:2020年6月23日北京智源大会演讲分享之AI创业专题论坛--10:00-10:30张亚勤教授<智能产业新浪潮> 导读:首先感谢北京智源大会进行主题演讲的各领域顶级教授,博主受益匪浅 ...

  9. 中集集团全球港航AI高科技独角兽中集飞瞳港口航运新枢纽人工智能技术走向成熟全球前三大船公司及港口码头应用落地港口智能化码头智能化

    中国是世界第一贸易大国,港口航运是我国经济高质量快速发展的重要载体,随着我国经济迅猛发展,综合国力日益增强国际地位不断提升.中集集团全球港航AI高科技独角兽中集飞瞳CIMCAI,港口航运新枢纽人工智能 ...

最新文章

  1. 【深度学习】with torch.no_grad的作用
  2. 关于浮点型加减乘除运算不精确的问题
  3. mysql php状态函数_mysql_stat()查询MySQL服务器当前系统状态
  4. asp按时间自动递增编号_约束力最强的手铐——美国ASP钢性手铐
  5. mysql 递归查找父节点_MYSQL递归查询所有父节点
  6. 【2016年第5期】数据科学人才的需求与培养
  7. vtkpolydata图形着色
  8. Celery+Rabbitmq实现异步任务
  9. 对编码通俗易懂的介绍
  10. java实现签名和解签
  11. Delphi货币类型转中文大写金额
  12. Android新浪微博登录
  13. html5魔塔样板快速上手,《梦幻模拟战》魔塔攻略|先人一步,快速上手梦战自走棋指南...
  14. bios sgx需要开启吗_为什么内存频率只有2133比实际低?主板开启XMP提高内存频率方法...
  15. 嵌入式Linux使用TFT屏幕:使用树莓派4B的MIPI-DSI接口点亮ST7701S屏幕
  16. 《树上的男爵》坚持解释不清的理想是疏离,还是自由?
  17. jquery获取checkbox选中的值
  18. c语言程序实践感受心得,C语言实践心得体会
  19. 动网 php v1.0 漏洞,动网论坛dispuser.php页面SQL注入漏洞
  20. Android5g手机,【手机篇】5G手机推荐

热门文章

  1. PAT甲级1145 Hashing - Average Search Time:[C++题解]哈希表、哈希表开放寻址法、二次探测法、求平均查找次数
  2. 操作系统第四章-文件管理
  3. 简书 java jvm_详细介绍Java虚拟机(JVM)
  4. 处理机调度实验c语言,操作系统实验处理机调度C语言实现
  5. 将长度为n的绳子分为m段求各段乘积的最大值
  6. arduino向串口发送数据时掉包_[技术]清楚简单,一种串口触摸屏的开发流程和方法介绍...
  7. php判断ip跳转城市,PHP判断IP并转跳到相应城市分站的方法
  8. CCF 2015年题目题解 - Python
  9. CCF 2019年题目题解 - Python
  10. C++ 命名空间 实战(二)之 直接数组访问迭代器访问