JAMMIN-GPT: Text-based Improvisation using LLMs in Ableton Live

要約

Ableton Live のユーザーが音楽の説明を付けて名前を付けて MIDI クリップを作成できるシステムを紹介します。
ユーザーは、Ableton のクリップビューに目的の音楽コンテンツを直接入力して作曲することができ、その内容が統合システムによって挿入されます。
これにより、ユーザーは音楽のアイデアを素早く生み出しながら、創造的なプロセスの流れを維持することができます。
このシステムは、ABC 記譜法、コード記号、ドラムタブ譜など、いくつかのテキストベースの音楽形式の 1 つを使用して応答するよう ChatGPT に要求することによって機能します。
これは、生成 AI ツールを既存の音楽ワークフローに統合するための重要なステップであり、説明的な言語を通じて創造的なビジョンを表現することを好むコンテンツ メーカーにとって価値がある可能性があります。
コードは https://github.com/supersational/JAMMIN-GPT で入手できます。

要約(オリジナル)

We introduce a system that allows users of Ableton Live to create MIDI-clips by naming them with musical descriptions. Users can compose by typing the desired musical content directly in Ableton’s clip view, which is then inserted by our integrated system. This allows users to stay in the flow of their creative process while quickly generating musical ideas. The system works by prompting ChatGPT to reply using one of several text-based musical formats, such as ABC notation, chord symbols, or drum tablature. This is an important step in integrating generative AI tools into pre-existing musical workflows, and could be valuable for content makers who prefer to express their creative vision through descriptive language. Code is available at https://github.com/supersational/JAMMIN-GPT.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google