Google DeepMind、Mac向けにサブ200msの低遅延を実現するリアルタイム音楽モデル「Magenta RealTime 2」をリリース

Beatingによると、Google DeepMindは、Apple Silicon搭載のMacBook向けに最適化されたオープンソースのリアルタイム音楽生成モデル「Magenta RealTime 2(MRT2)」をリリースした。このモデルは、MIDI信号、テキストプロンプト、または音声サンプルを通じて音声生成を制御でき、遅延は200ミリ秒未満としている。

MRT2は3つのインタラクションモードに対応している。コード入力に基づいてオーケストラの伴奏を自動生成するMIDIによるガイド付き伴奏、スタイルベースの生成のためのテキストから楽器への合成、入力音の特性を模倣するオーディオ・クローニングだ。2種類のパラメータ版が用意されており、すべてのApple Silicon Mac向けの2.3億パラメータ版mrt2_smallと、高性能なMシリーズのProおよびMaxチップ向けの24億パラメータ版mrt2_baseがある。推論ライブラリのmagenta-rtと、C++ベースの推論エンジンは現在GitHubでオープンソース化されており、単体のmacOSアプリケーションやDAWプラグインも提供されている。

免責事項:本ページの情報には第三者提供の内容が含まれる場合があり、参考目的のみで提供されています。これらはGateの見解や意見を示すものではなく、金融、投資、または法律上の助言を構成するものでもありません。暗号資産取引には高いリスクが伴います。意思決定を行う際には、本ページの情報のみに依存しないでください。詳細については、免責事項をご確認ください。
コメント
0/400
コメントなし