主题: Benchmarking in Optimization: Best Practice and Open Issues
摘要: 这项调查汇总了来自十几个不同背景的研究人员和来自世界各地不同研究所的想法和建议。 促进基准测试的最佳实践是其主要目标。 本文讨论了基准测试中的八个基本主题:明确规定的目标,明确规定的问题,合适的算法,适当的性能指标,周到的分析,有效和高效的设计,可理解的表示形式以及有保证的可重复性。 最终目标是提供公认的指南(规则),可能对作者和审稿人有用。 由于优化基准测试是一个活跃而不断发展的研究领域,因此该手稿旨在通过定期更新随着时间的推移而不断发展。