科学・技術
安定しないパフォーマンス時代の実験的評価方法論
Experimental Evaluation Methodology for the Era of No Steady Performance [pdf] (d3s.mff.cuni.cz)
要約
本稿は、パフォーマンスが一定しない時代における実験の評価方法論について論じている。従来の評価手法では対応が難しい状況下で、より信頼性の高い実験結果を得るための新しいアプローチを提案するものである。
全文翻訳
パフォーマンスが一定しない時代における実験的評価方法論について論じる。
従来の評価手法では、システムやアルゴリズムのパフォーマンスが時間とともに変動したり、予測不可能であったりする場合に、正確な比較や分析が困難になることがある。
このような状況に対応するため、本稿では、変動するパフォーマンスを考慮に入れた新しい実験設計と評価統計の手法を提案する。
これにより、より堅牢で信頼性の高い実験結果を得ることが可能となる。