On the relationship between Benchmarking, Standards and Certification in Robotics and AI

要約

ベンチマーク、標準、認証は密接に関連するプロセスです。
標準は、ロボット工学や AI システムが準拠する場合と準拠しない場合がある規範的な要件を提供できます。
認証は通常、証明書の動作を許可するかどうかの主な決定要因として、1 つ以上の規格への準拠に依存します。
ベンチマークは、ロボットや AI システムを測定できる標準化されたテストのセットです。
したがって、ベンチマークは非公式の標準と考えることができます。
このペーパーでは、ベンチマーク、標準、認証の例を用いてこれらのテーマを展開し、これら 3 つの関連したプロセスが有用であるだけでなく、責任あるイノベーションの広範な実践にとって不可欠であることを主張します。

要約(オリジナル)

Benchmarking, standards and certification are closely related processes. Standards can provide normative requirements that robotics and AI systems may or may not conform to. Certification generally relies upon conformance with one or more standards as the key determinant of granting a certificate to operate. And benchmarks are sets of standardised tests against which robots and AI systems can be measured. Benchmarks therefore can be thought of as informal standards. In this paper we will develop these themes with examples from benchmarking, standards and certification, and argue that these three linked processes are not only useful but vital to the broader practice of Responsible Innovation.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google