在计算机视觉论文中benchmark和baseline的区别
总结
benchmark一般是和同行中比较牛的算法比较,比牛算法还好,那你可以考虑发好一点的会议/期刊;
baseline一般是自己算法优化和调参过程中自己和自己比较,目标是越来越好,当性能超过benchmark时,可以发表了,当性能甚至超过SOTA时,恭喜你,考虑投顶会顶刊啦。
benchmark
一个算法之所以被称为benchmark,是因为它的性能已经被广泛研究,人们对它性能的表现形式、测量方法都非常熟悉,因此可以作为标准方法来衡量其他方法的好坏。这里需要区别state-of-the-art(SOTA),能够称为SOTA的算法表明其性能在当前属于最佳性能。如果一个新算法以SOTA作为benchmark,这当然是最好的了,但如果比不过SOTA,能比benchmark要好,且方法有一定创新,也是可以发表的。
baseline
一个算法被称为baseline,基本上表示比这个算法性能还差的基本上不能接受的,除非方法上有革命性的创新点,而且还有巨大的改进空间和超越benchmark的潜力,只是因为是发展初期而性能有限。所以baseline有一个自带的含义就是“性能起点”。这里还需要指出其另一个应用语境,就是在算法优化过程中,一般version1.0是作为baseline的,即这是你的算法能达到的一个基本性能,在算法继续优化和调参数的过程中,你的目标是比这个性能更好,因此需要在这个base line的基础上往上跳。简而言之,benchmark一般是和同行中比较牛的算法比较,比牛算法还好,那你可以考虑发好一点的会议/期刊;baseline一般是自己算法优化和调参过程中自己和自己比较,目标是越来越好,当性能超过benchmark时,可以发表了,当性能甚至超过SOTA时,恭喜你,考虑投顶会顶刊啦。
来源:
在计算机视觉论文中benchmark和baseline的区别,以及两者差别多大可以算作较为显著? - Anonymous的回答 - 知乎 https://www.zhihu.com/question/28823373/answer/101504099
在计算机视觉论文中benchmark和baseline的区别相关推荐
- 深度学习中的Benchmark,Baseline,Backbone和SOTA的比较说明举例分析
1 Benchmark 1.1 中英文直译 基准:水准点:衡量尺度 A benchmark is something whose quality or quantity is known and wh ...
- 【论文阅读术语】benchmark、baseline、backbone、ground truth
[最基础术语一]benchmark.baseline.backbone.ground truth 1. benchmark benchmark是一种评价方式,其指的是一个过程.具体来说就是针对不同Mo ...
- 深度学习常见名词概念:Sota、Benchmark、Baseline、端到端模型、迁移学习等的定义
深度学习:Sota的定义 Sota The end to end(非端到端模型) End to end(端到端模型) Benchmark.Baseline 并发.并行.串行 迁移学习 微调 进程.线程 ...
- Benchmark和Baseline的含义与区别
Benchmark和Baseline的含义与区别 原文地址:https://www.zhihu.com/question/28823373 Benchmark和baseline都有性能比较的意思. 先 ...
- Deep Learning 中的 benchmark 与 baseline
Deep Learning 中的 benchmark 与 baseline benchmark benchmark是一个参考点,通常指一个数据集或一系列标准化的测试任务,用于评估模型的性能.bench ...
- 小白入门计算机视觉系列——ReID(二):baseline构建:基于PyTorch的全局特征提取网络(Finetune ResNet50+tricks)
ReID(二):baseline构建:基于PyTorch的全局特征提取网络(Finetune ResNet50+tricks) 本次带来的是计算机视觉中比较热门的重点的一块,行人重识别(也叫Perso ...
- 深度学习:什么是backbone,benchmark,baseline
backbone:骨干网络,比如alexnet,ZFnet,VGG,googlenet... benchmark:性能指标,比如accuracy,内存消耗,模型复杂度,或者在性能上很有代表性的算法框架 ...
- 如何通俗理解计算机视觉、计算机图形、图像处理之间的区别与联系
这三者之间联系和区别可以通过下图表示, 左边的图片表示实际景物,右边图片表示实际景物对应的图片. 1.计算机图形 计算机图形技术常用于计算机生成图形.该技术常用的领域有: a.动漫 b.游戏 c.计算 ...
- 年薪20万和50万的计算机视觉算法工程师,到底有什么区别?
文末扫码,受邀加入计算机视觉垂直方向的交流群 计算机视觉是目前AI在中国落地最广泛的技术.国内计算机视觉企业达140余家,预计未来三年我国计算机视觉市场仍将保持100%以上的速度增长,2020年行业市 ...
最新文章
- 面试收集--卡特兰数(Catalan数)应用
- 太极图正确画法_小小太极图,暗藏大乾坤!您真的看懂了这张“中华第一图”?...
- Spring框架入门
- mysql 错误记录
- linux命令route
- spring总结(01)
- 【每日一练 088】性能优化-SQL tuning(一)
- 十二个月内 仅仅依靠Google打造成功网站
- 我讨厌电脑!一个系统管理员的自白
- struts2 配置 自学练习 list jsp页输出 中文转英文首字母
- CentOS添加新角色(新增一个具有root权限的新用户)
- 基于UNITY引擎开发的游戏源码修改方法
- 计算机无法安装dx11,Windows10系统DX11正确的安装路径是什么?
- Shifter - Responsive HTML5 高大上静态页面
- DSPE-PEG-TPP 磷酸三苯酯修饰聚乙二醇PE磷脂
- 干货!基于深度空间一致性的鲁棒点云配准算法
- 我是大海里的一页扁舟
- 数据库——怎样实现数据完整性
- matlab自动识别技术,基于Matlab的车牌自动识别技术研究与实现
- Codeforces Round #829 cf1753A Cowardly Rooks