benchmark是什么东西? 看到好多项目里面都有一个benchmark
benchmark 网络解释
1. 基准测试程序:*系统选型与配置 * 模拟(simulation)与仿真(emulation) * 系统模型和分析技术 * 典型基准测试程序 (benchmark) * 其它的系统评价方法
2. 基准点:基准点和参照系:基准点(benchmark)是为了建立参照系而界定的理想经济环境,如完全信息,完全竞争,无外部性的经济环境,从而得出这些理想经济环境下的理想结果,因而基准点是相对于非理性经济环境和所要发展新的理论而言的.
benchmark 词典解释
1. 基准;水准点;衡量尺度
A benchmark is something whose quality or quantity is known and which can therefore be used as a standard with which other things can be compared.
e.g. The truck industry is a benchmark for the economy.
卡车业是衡量经济的一个基准。
通俗的讲,一个算法之所以被称为benchmark,是因为它的性能已经被广泛研究,人们对它性能的表现形式、测量方法都非常熟悉,因此可以作为标准方法来衡量其他方法的好坏。
这里需要区别state-of-the-art(SOTA),能够称为SOTA的算法表明其性能在当前属于最佳性能。如果一个新算法以SOTA作为benchmark,这当然是最好的了,但如果比不过SOTA,能比benchmark要好,且方法有一定创新,也是可以发表的。