RTF(real_time_factor实时率,在线识别指标)

RTF(real time factor)表示如下：
RTF=ASR识别所有音频处理时间(单位秒)所有音频总时间(单位秒)RTF=\frac{ASR识别所有音频处理时间 (单位秒)}{所有音频总时间 (单位秒)} RTF=所有音频总时间(单位秒)ASR识别所有音频处理时间(单位秒)
【意义】：平均1秒时长音频给ASR算法需要多少秒处理，小于1才能达到实时效果。越小越好，正常0.2-0.3
该指标针对的是在线ASR识别指标
具体见官方代码(参考文献)：

 BaseFloat frame_shift = 0.01;BaseFloat real_time_factor =global_timer.Elapsed() / (frame_shift * num_frames);if (num_frames > 0)KALDI_LOG << "Real-time factor was " << real_time_factor<< " assuming frame shift of " << frame_shift;

另外一段代码(参考文献)：

double real_time_factor = total_time_taken_ / total_audio_,average_wait = (total_time_taken_ - total_audio_) / num_utts_,idle_proportion = total_time_waited_ / total_audio_,idle_percent = 100.0 * idle_proportion;

    double elapsed = timer.Elapsed();KALDI_LOG << "Time taken "<< elapsed<< "s: real-time factor assuming 100 frames/sec is "<< (elapsed*100.0/frame_count);

【注解】 会发现上面三段代码都是一个意思
real_time_factor=total_time_takentotal_audio=total_time_takenframe_shift⋅num_frames=total_time_taken0.01⋅num_frames=100⋅total_time_takennum_frames\begin{aligned} real\_time\_factor & = \frac{total\_time\_taken}{total\_audio} \\ & = \frac{total\_time\_taken}{frame\_shift \cdot num\_frames} \\ & = \frac{total\_time\_taken}{0.01 \cdot num\_frames} \\ & = \frac{100 \cdot total\_time\_taken}{num\_frames} \\ \end{aligned} real_time_factor=total_audiototal_time_taken=frame_shift⋅num_framestotal_time_taken=0.01⋅num_framestotal_time_taken=num_frames100⋅total_time_taken
即：音频总时长=total_audio=frame_shift⋅num_frames=0.01⋅num_frames\color{red}音频总时长=total\_audio = frame\_shift \cdot num\_frames=0.01 \cdot num\_frames音频总时长=total_audio=frame_shift⋅num_frames=0.01⋅num_frames

RTX(real_time_x实时效率,离线转写指标)

RTX(real time x)表示如下：
RTX=所有音频总时间(单位秒)ASR识别所有音频处理时间(单位秒)RTX=\frac{所有音频总时间 (单位秒)}{ASR识别所有音频处理时间 (单位秒)} RTX=ASR识别所有音频处理时间(单位秒)所有音频总时间(单位秒)
【意义】：平均1秒时间内我们的ASR算法可以处理多长时间的音频，越大越好，正常在GPU上是500多
参考代码：

KALDI_LOG << "Overall: "<< " Aggregate Total Time: " << total_time<< " Total Audio: " << total_audio * iterations<< " RealTimeX: " << total_audio * iterations / total_time;

Reference

online-timing.cc
online2-wav-nnet2-latgen-threaded.cc
gmm-latgen-simple.cc
batched-wav-nnet3-cuda.cc

理解RTF和RTX指标相关推荐

深入理解人工智能模型能力指标F1的具体意义
文章目录简介示例结论简介在对人工智能训练能力水平评估的标准中,准确性(Accuracy),精准度(Precision),召回率(Recall)和综合指标 F1. 三前者相对比较好理解,基具 ...
理解OBV能量潮指标 for quant
OBV Investopedia StockCharts DayTrading.com Fidelity 极少人知道的OBV能量潮指标,威力巨大 On-Balance Volume(OBV), dev ...
想要系统稳定？最好用也最容易理解的指标是.....
在金融行业里,大家对于系统稳定运行比精准运行,更迫切的需求.这也是为什么位于国内四大行之首的工商银行,后台业务系统还是多年没升级.原因之一是考虑到系统需要稳定运行. 在风险管理上,对于稳定性的监控也十 ...
围城书评_软件开发指标的问答和书评
围城书评 Dave Nicolette撰写的<软件开发度量>一书探讨了如何使用度量来跟踪和指导软件开发. 它说明了不同的开发方法和过程模型(例如传统的基于瀑布的迭代软件或迭代式敏捷软件开发 ...
【java 性能优化实战】1 理论分析：性能优化，有哪些衡量指标、性能优化的技术手段
指标是我们衡量很多事物,以及做出行为决策的重要参考.例如在生活中,当你打算买汽车时,会关注很多指标,比如动力性.燃油经济性.制动性.操纵稳定性.平顺性.通过性.排放与噪声等,而这些指标也都有相关的测试 ...
DeepMind论文解读：让机器更深入地理解文本
在碎片化阅读充斥眼球的时代,越来越少的人会去关注每篇论文背后的探索和思考. 在这个栏目里,你会快速 get 每篇精选论文的亮点和痛点,时刻紧跟 AI 前沿成果. 点击本文底部的「阅读原文」即刻加入社区 ...
激活策略查询_5个提问，详细介绍北极星指标的策略框架
北极星指标(North Star Metric)已经逐渐成为许多公司指导产品发展的重要指标,本文通过五个设问和多个行业案例,系统性地介绍北极星指标这类产品策略框架. 如今有非常多的人在谈论和使用北极星 ...
php 选股器,RSI切线突破选股指标（TDX）..
本帖最后由 yinchoo 于 2009-7-25 09:10 编辑 1.对于RSI指标的运用请查坛中伟哥.井中月.cqcsshw .九阳等高手的贴子: http://www.stockwei.co ...
论文浅尝 | 对于知识图谱嵌入表示的几何形状理解
论文链接:http://anthology.aclweb.org/attachments/P/P18/P18-1012.Presentation.pdf 发表会议:ACL 2018 摘要知识图谱的嵌 ...

理解RTF和RTX指标

理解RTF和RTX

RTF(real_time_factor实时率,在线识别指标)

RTX(real_time_x实时效率,离线转写指标)

Reference

理解RTF和RTX指标相关推荐

最新文章

热门文章