Comparison of Waymo Rider-Only Crash Data to Human Benchmarks at 7.1 Million Miles

要約

この論文では、人間のドライバーが車内または遠隔地にいない乗客専用 (RO) 配車アプリケーションで使用される SAE レベル 4 の自動運転システム (ADS) である Waymo Driver の安全性能を検証します。
ADSの事故データは、アリゾナ州フェニックス、カリフォルニア州サンフランシスコ、カリフォルニア州ロサンゼルスにおける2023年10月末までの714万ROマイル以上を報告するNHTSAの常設一般命令(SGO)から得られたものである。
この研究は、(人間がハンドルを握って行うADSテストではなく)ROデータのみを使用して全体的な衝突車両率を、文献で報告されている過小報告や不平等な報告閾値によって引き起こされるバイアスも補正する人間のベンチマークと比較した最初の研究の1つです。

すべての場所を合わせて考慮すると、負傷が報告された衝突車両の発生率は、ADS では 100 万マイルあたり 0.41 件 (IPMM) だったのに対し、人間のベンチマークでは 2.78 IPMM で、85% の削減、つまり 6.8 分の 1 の割合でした。
警察が報告したすべての場所の衝突車両率は、ADS では 2.1 IPMM だったのに対し、人間のベンチマークでは 4.85 IPMM で、57% の削減、つまり 2.3 分の 1 の割合でした。
警察報告および負傷者報告による ADS の事故車両率の減少は、サンフランシスコとフェニックスで比較した場合、およびすべての場所を合計した場合に統計的に有意でした。
ロサンゼルスでの比較は、これまで走行距離が少なく、イベントの報告もなかったため、統計的に有意ではありませんでした。
一般に、Waymo ADS は人間のベンチマークよりも物的損害や傷害の発生率が低かった。
ベンチマークの推定値が不正確であり、ベンチマークに偏りをもたらす過小報告の潜在的な原因が複数あることを考慮すると、物的損害または傷害の比較結果を解釈する際には注意が必要です。
これらの衝突率の結果は、安全性ケースのアプローチにおける他の方法論とともに、方向性と継続的な信頼性の向上の指標として解釈される必要があります。

要約(オリジナル)

This paper examines the safety performance of the Waymo Driver, an SAE level 4 automated driving system (ADS) used in a rider-only (RO) ride-hailing application without a human driver, either in the vehicle or remotely. ADS crash data was derived from NHTSA’s Standing General Order (SGO) reporting over 7.14 million RO miles through the end of October 2023 in Phoenix, AZ, San Francisco, CA, and Los Angeles, CA. This study is one of the first to compare overall crashed vehicle rates using only RO data (as opposed to ADS testing with a human behind the wheel) to a human benchmark that also corrects for biases caused by underreporting and unequal reporting thresholds reported in the literature. When considering all locations together, the any-injury-reported crashed vehicle rate was 0.41 incidents per million miles (IPMM) for the ADS vs 2.78 IPMM for the human benchmark, an 85% reduction or a 6.8 times lower rate. Police-reported crashed vehicle rates for all locations together were 2.1 IPMM for the ADS vs. 4.85 IPMM for the human benchmark, a 57% reduction or 2.3 times lower rate. Police-reported and any-injury-reported crashed vehicle rate reductions for the ADS were statistically significant when compared in San Francisco and Phoenix as well as combined across all locations. The comparison in Los Angeles, which to date has low mileage and no reported events, was not statistically significant. In general, the Waymo ADS had a lower any property damage or injury rate than the human benchmarks. Given imprecision in the benchmark estimate and multiple potential sources of underreporting biasing the benchmarks, caution should be taken when interpreting the results of the any property damage or injury comparison. Together, these crash-rate results should be interpreted as a directional and continuous confidence growth indicator, together with other methodologies, in a safety case approach.

arxiv情報

著者 Kristofer D. Kusano,John M. Scanlon,Yin-Hsiu Chen,Timothy L. McMurry,Ruoshu Chen,Tilia Gode,Trent Victor
発行日 2023-12-20 00:27:10+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.RO パーマリンク