AI 正在引领人类的下一次工业革命,成为支撑数字经济的基本工具组件。

7月9-10日,由开放原子开源基金会与 Linux 基金会联合开源中国社区共同发起的首届“GOTC 全球开源技术峰会”在上海世博中心举行,Zilliz 合伙人、系统架构师郭人通受邀出席“AI、大数据与数字经济专题论坛”,与 LF AI & Data 基金会执行董事 Ibrahim Haddad、中兴通讯 AI 研发总工韩炳涛、英特尔 OpenVINO 边缘人工智能软件首席布道师 Raymond Lo 等同场共论开源的道与术。

AI 时代产生了大量非结构化数据,以非结构化数据为数据基础、AI 为计算手段的全新数据系统成为产业刚需,由 Zilliz 研发的开源向量数据库 Milvus 即是为了解决这一底层需求而生。

相对于数据库、AI 这两个发展颇久的领域,郭人通认为,面向 AI 的向量数据库领域还处于早期阶段,通用的基础软件系统陆续出现,目前正在朝着标准化阶段演进。

谈及向量数据库这一新兴交叉领域的工作,郭人通总结了 Milvus 团队感触最深的五大挑战:

一,要支撑系统的快速演进。对于新兴领域的系统软件,迭代速度决定生命力,因此需要一个足够开放、解耦的架构来避免快速演进过程中的复杂度失控。

二,确保不同部署环境下的系统表现。这由数据科学流程决定,关注验证速度和迭代速度的数据科学家和算法工程师主要通过笔记本或工作站使用系统,验证完毕就会在私有集群和云上进行部署。

三,硬件成本把控。向量数据和 AI 模型的内部都有大量的矩阵和向量运算,因此系统的弹性机制和资源调度机制对于成本影响很大。

四,多样化的负载特征。不同负载对于系统不同模块的压力区别非常大,为了有效适应不同负载,系统需要有组件级的弹性能力。

五,复杂的 Query。随着用户查询场景的复杂化,除了向量引擎,系统还需要拥有 Kv 数据库、结构数据的谓词运算、文本查询等能力,因此需要一种灵活的协处理器机制,来保障其他类型的分析引擎和 Milvus 的向量引擎能够紧密协作。

身处上述挑战,围绕云原生优先、日志即数据、批流一体等理念设计的 MIlvus 2.0版本已于今年6月发布,详情请戳《Milvus 2.0 新版本一览:重新定义向量数据库》,欢迎使用与探讨~

Github @Milvus-io|CSDN @Zilliz Planet|Bilibili @Zilliz-Planet

Zilliz 以重新定义数据科学为愿景,致力于打造一家全球领先的开源技术创新公司,并通过开源和云原生解决方案为企业解锁非结构化数据的隐藏价值。

Zilliz 构建了 Milvus 向量数据库,以加快下一代数据平台的发展。Milvus 目前是 LF AI & Data 基金会的毕业项目,能够管理大量非结构化数据集。我们的技术在新药发现、计算机视觉、推荐引擎、聊天机器人等方面具有广泛的应用。

Zilliz 合伙人、系统架构师郭人通出席GOTC 2021专题论坛,谈向量数据库的开发挑战...相关推荐

  1. 【软考系统架构设计师】2009年下系统架构师案例分析历年真题

    [软考系统架构设计师]2009年下系统架构师案例分析历年真题 2009年下系统架构师案例分析历年真题 [软考系统架构设计师]2009年下系统架构师案例分析历年真题 2009年系统架构师案例分析真题第一 ...

  2. 【软考系统架构设计师】2021年下系统架构师论文写作历年真题

    [软考系统架构设计师]2021年下系统架构师论文写作历年真题 [软考系统架构设计师]2021年下系统架构师论文写作历年真题 [软考系统架构设计师]2021年下系统架构师论文写作历年真题 2021系统架 ...

  3. Sun地系统架构师考试(SCEA)

    http://www.qqgb.com/Program/Java/JavaBlog/Program_146087.html 今天,2005年4月9号中午,我通过了Sun的系统架构师考试(SCEA)的3 ...

  4. 蚂蚁集团高级架构师郭援非:分布式数据库是金融机构数字化转型的最佳路径...

    中生代技术 链接技术大咖,分享技术干货 全文:4500字 2020年8月26-28日,在中科软科技举办的中国财险科技应用高峰论坛上,蚂蚁集团高级解决方案架构师郭援非发表了<OceanBase分布 ...

  5. 2015年系统架构师考试题详解

    原文地址为: 2015年系统架构师考试题详解 考试科目一:综合知识 某航空公司机票销售系统有n个售票点,该系统为每个售票点创建一个进程Pi(i=1,2,-,n)管理机票销售.假设Tj(j=1,2,-, ...

  6. 【软考系统架构设计师】2009年下系统架构师综合知识历年真题

    [软考系统架构设计师]2009年下系统架构师综合知识历年真题 2009年下系统架构师综合知识历年真题 [软考系统架构设计师]2009年下系统架构师综合知识历年真题 [2009下架构真题第01题:绿色] ...

  7. 【转载】软考高级系统架构师论文,到底该如何写

    前言 2020年参加了软考高级系统架构师的考试,那是我在考场上第一次写论文,2小时2500字+,最后得分56. 拿到成绩后写了一篇关于七天复习考过系统架构师的文章,作为一个自学者,深知网上系统架构师的 ...

  8. 腾讯公司数据平台高级架构师 郭玮:TDW在Hadoop上的实践分享

    腾讯是一个巨无霸公司,我们日常的生活中已与它产生了千丝万缕的联系,不可避免的也产生了海量的数据,如何正确而快速地处理这些海量数据,腾讯数据平台高级架构师郭玮通过发表主题为"TDW在Hadoo ...

  9. 软考系统架构师、信息系统项目管理师、系统分析师、系统规划与管理师和网络规划师资料大汇总

    公众号此文章地址:https://mp.weixin.qq.com/s/ojzMFODodAnKkhNSmLg1kg 前言 在软考交流群的几天,很多准备2021年软考的同学已经开始准备整理复习资料了. ...

最新文章

  1. 关于KN95口罩:可以使用多久?要不要呼吸阀?怎么佩戴?
  2. gitlab+jenkins+maven+docker持续集成(四)——Extended E-mail Notification配置
  3. 图灵有奖书评征集活动第001期
  4. 《LeetCode力扣练习》第33题 搜索旋转排序数组 Java
  5. 杨元庆谈三年变化:IBM到底给联想带来什么?
  6. 014_下载乱码处理
  7. ubuntu 14.04下 horizon openstack_dashboard 的开发环境搭建
  8. 【Elasticsearch】Bkd-Tree 在 Lucene 中的实现
  9. 【报告分享】华为-5G时代运营商数据和存储架构白皮书.pdf(附下载链接)
  10. 0831 - 每晚放松一刻
  11. quartus仿真21:JK触发器和D触发器实现110序列探测器
  12. java并发学习--线程池(一)
  13. 吉他指弹入门——双手泛音
  14. ios 权限提示语_uni-app开发经验分享十一: uniapp iOS云打包修改权限提示语
  15. LeetCode 面试题62. 圆圈中最后剩下的数字 详细题解
  16. 超级详细的redis命令大全
  17. SVG排版 | 毛玻璃、磨砂玻璃模板效果
  18. Uncaught SyntaxError: missing ) after argument list 解决办法
  19. 南核目录2020pdf_最新版CSSCI来源期刊目录及增减变化!
  20. 调试英语计算机,计算机辅助调试,computer-aided tuning,音标,读音,翻译,英文例句,英语词典...

热门文章

  1. 欧姆龙NJ501应用etherCAT
  2. COCO 数据集的使用,以及下载链接
  3. 努力,努力,只要再多坚持一会
  4. Omnet 5.6.1安装教程附官网下载地址
  5. “装 X ”就是牛,试一试 IDEA 解决 Maven 依赖冲突的超级神器!
  6. 【EI连续检索】第五届人工智能与计算机科学国际会议(AICS2023)征稿中
  7. 计算机作品三等奖——计划清单APP
  8. c语言程序设计与数据结构清华版,清华大学出版社-图书详情-《程序设计基础与数据结构》...
  9. JQuery 转自七米
  10. 广播通信设计——WinSock编程(QT界面)