AIoT-Based Drum Transcription Robot using Convolutional Neural Networks

要約

情報技術の発展に伴い、ロボット技術はさまざまな分野で大きな進歩を遂げています。
これらの新技術により、産業、農業、教育などの分野でロボットを使用できるようになります。
本稿では、AIoTとフォグコンピューティング技術に基づいて、リアルタイムで自動的に採譜を完了できるドラムロボットを提案します。
具体的には、このドラムロボットシステムは、データストレージ用のクラウドノード、リアルタイムコンピューティング用のエッジノード、データ指向実行アプリケーションノードで構成されます。
ドラム演奏の音楽を分析し、ドラムの転写を実現するために、ドラムを分類するための軽量の畳み込みニューラル ネットワーク モデルをさらに提案します。これは、高速エッジ計算のために端末デバイスにより効果的に展開できます。
実験結果は、提案したシステムがより競争力のあるパフォーマンスを達成し、さまざまなスマートなアプリケーションやサービスを享受できることを示しています。

要約(オリジナル)

With the development of information technology, robot technology has made great progress in various fields. These new technologies enable robots to be used in industry, agriculture, education and other aspects. In this paper, we propose a drum robot that can automatically complete music transcription in real-time, which is based on AIoT and fog computing technology. Specifically, this drum robot system consists of a cloud node for data storage, edge nodes for real-time computing, and data-oriented execution application nodes. In order to analyze drumming music and realize drum transcription, we further propose a light-weight convolutional neural network model to classify drums, which can be more effectively deployed in terminal devices for fast edge calculations. The experimental results show that the proposed system can achieve more competitive performance and enjoy a variety of smart applications and services.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google