总结

benchmark一般是和同行中比较牛的算法比较,比牛算法还好,那你可以考虑发好一点的会议/期刊;
baseline一般是自己算法优化和调参过程中自己和自己比较,目标是越来越好,当性能超过benchmark时,可以发表了,当性能甚至超过SOTA时,恭喜你,考虑投顶会顶刊啦。

benchmark

一个算法之所以被称为benchmark,是因为它的性能已经被广泛研究,人们对它性能的表现形式、测量方法都非常熟悉,因此可以作为标准方法来衡量其他方法的好坏。这里需要区别state-of-the-art(SOTA),能够称为SOTA的算法表明其性能在当前属于最佳性能。如果一个新算法以SOTA作为benchmark,这当然是最好的了,但如果比不过SOTA,能比benchmark要好,且方法有一定创新,也是可以发表的。

baseline

一个算法被称为baseline,基本上表示比这个算法性能还差的基本上不能接受的,除非方法上有革命性的创新点,而且还有巨大的改进空间和超越benchmark的潜力,只是因为是发展初期而性能有限。所以baseline有一个自带的含义就是“性能起点”。这里还需要指出其另一个应用语境,就是在算法优化过程中,一般version1.0是作为baseline的,即这是你的算法能达到的一个基本性能,在算法继续优化和调参数的过程中,你的目标是比这个性能更好,因此需要在这个base line的基础上往上跳。简而言之,benchmark一般是和同行中比较牛的算法比较,比牛算法还好,那你可以考虑发好一点的会议/期刊;baseline一般是自己算法优化和调参过程中自己和自己比较,目标是越来越好,当性能超过benchmark时,可以发表了,当性能甚至超过SOTA时,恭喜你,考虑投顶会顶刊啦。

来源:
在计算机视觉论文中benchmark和baseline的区别,以及两者差别多大可以算作较为显著? - Anonymous的回答 - 知乎 https://www.zhihu.com/question/28823373/answer/101504099

在计算机视觉论文中benchmark和baseline的区别相关推荐

  1. 深度学习中的Benchmark,Baseline,Backbone和SOTA的比较说明举例分析

    1 Benchmark 1.1 中英文直译 基准:水准点:衡量尺度 A benchmark is something whose quality or quantity is known and wh ...

  2. 【论文阅读术语】benchmark、baseline、backbone、ground truth

    [最基础术语一]benchmark.baseline.backbone.ground truth 1. benchmark benchmark是一种评价方式,其指的是一个过程.具体来说就是针对不同Mo ...

  3. 深度学习常见名词概念:Sota、Benchmark、Baseline、端到端模型、迁移学习等的定义

    深度学习:Sota的定义 Sota The end to end(非端到端模型) End to end(端到端模型) Benchmark.Baseline 并发.并行.串行 迁移学习 微调 进程.线程 ...

  4. Benchmark和Baseline的含义与区别

    Benchmark和Baseline的含义与区别 原文地址:https://www.zhihu.com/question/28823373 Benchmark和baseline都有性能比较的意思. 先 ...

  5. Deep Learning 中的 benchmark 与 baseline

    Deep Learning 中的 benchmark 与 baseline benchmark benchmark是一个参考点,通常指一个数据集或一系列标准化的测试任务,用于评估模型的性能.bench ...

  6. 小白入门计算机视觉系列——ReID(二):baseline构建:基于PyTorch的全局特征提取网络(Finetune ResNet50+tricks)

    ReID(二):baseline构建:基于PyTorch的全局特征提取网络(Finetune ResNet50+tricks) 本次带来的是计算机视觉中比较热门的重点的一块,行人重识别(也叫Perso ...

  7. 深度学习:什么是backbone,benchmark,baseline

    backbone:骨干网络,比如alexnet,ZFnet,VGG,googlenet... benchmark:性能指标,比如accuracy,内存消耗,模型复杂度,或者在性能上很有代表性的算法框架 ...

  8. 如何通俗理解计算机视觉、计算机图形、图像处理之间的区别与联系

    这三者之间联系和区别可以通过下图表示, 左边的图片表示实际景物,右边图片表示实际景物对应的图片. 1.计算机图形 计算机图形技术常用于计算机生成图形.该技术常用的领域有: a.动漫 b.游戏 c.计算 ...

  9. 年薪20万和50万的计算机视觉算法工程师,到底有什么区别?

    文末扫码,受邀加入计算机视觉垂直方向的交流群 计算机视觉是目前AI在中国落地最广泛的技术.国内计算机视觉企业达140余家,预计未来三年我国计算机视觉市场仍将保持100%以上的速度增长,2020年行业市 ...

最新文章

  1. 面试收集--卡特兰数(Catalan数)应用
  2. 太极图正确画法_小小太极图,暗藏大乾坤!您真的看懂了这张“中华第一图”?...
  3. Spring框架入门
  4. mysql 错误记录
  5. linux命令route
  6. spring总结(01)
  7. 【每日一练 088】性能优化-SQL tuning(一)
  8. 十二个月内 仅仅依靠Google打造成功网站
  9. 我讨厌电脑!一个系统管理员的自白
  10. struts2 配置 自学练习 list jsp页输出 中文转英文首字母
  11. CentOS添加新角色(新增一个具有root权限的新用户)
  12. 基于UNITY引擎开发的游戏源码修改方法
  13. 计算机无法安装dx11,Windows10系统DX11正确的安装路径是什么?
  14. Shifter - Responsive HTML5 高大上静态页面
  15. DSPE-PEG-TPP 磷酸三苯酯修饰聚乙二醇PE磷脂
  16. 干货!基于深度空间一致性的鲁棒点云配准算法
  17. 我是大海里的一页扁舟
  18. 数据库——怎样实现数据完整性
  19. matlab自动识别技术,基于Matlab的车牌自动识别技术研究与实现
  20. Codeforces Round #829 cf1753A Cowardly Rooks

热门文章

  1. Free C/C++ Libraries(免费的C/C++库)
  2. Python科研数据分析专题之正态性检验
  3. (转)ibatis Tips 之 java.util.Map作为parameterClass和resultClass
  4. Linux系统编程.NO7——目录操作函数
  5. 产品经理如何建立和促进心理安全
  6. BCNF与3NF的区别例子
  7. IP2188-Datasheet
  8. Linux 系统设置 : modprobe 命令详解
  9. html页面滚动条设置
  10. 动态壁纸给linux发行版添加活力背景