Global Benchmark Database

要約

このペーパーでは、ベンチマーク インスタンスとそのメタデータをプロビジョニングし、持続的に維持するための包括的なツール スイートである Global Benchmark Database (GBD) について説明します。
ベンチマーク メタデータの可用性は、ベンチマークのデータ駆動型コンパイル、実行時実験のドメイン固有の分析、ソルバーのインスタンス固有の選択など、実証研究における多くのタスクにとって不可欠です。
このペーパーでは、GBD のデータ モデルとそのインターフェイスを紹介し、それらと対話する方法の例を示します。
また、カスタム データ ソースの統合を示し、追加の問題ドメイン、インスタンス形式、特徴抽出機能を使用して GBD を拡張する方法についても説明します。

要約(オリジナル)

This paper presents Global Benchmark Database (GBD), a comprehensive suite of tools for provisioning and sustainably maintaining benchmark instances and their metadata. The availability of benchmark metadata is essential for many tasks in empirical research, e.g., for the data-driven compilation of benchmarks, the domain-specific analysis of runtime experiments, or the instance-specific selection of solvers. In this paper, we introduce the data model of GBD as well as its interfaces and provide examples of how to interact with them. We also demonstrate the integration of custom data sources and explain how to extend GBD with additional problem domains, instance formats and feature extractors.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google