QosmoがAIオーディオ・プラグイン「Neutone」を発表 深層学習AIモデルがリアルタイム音楽制作で利用可能に
[22/05/27]
提供元:PRTIMES
提供元:PRTIMES
AI研究者・エンジニアが深層学習型DSPモデルをクリエーターと共有できるコミュニティー型プラットフォームを公開
AIの活用による創造性の発展に取り組む株式会社Qosmo(本社:東京都目黒区、代表取締役社長:徳井直生、以下「コズモ」)は、深層学習を使ったリアルタイムDSP(デジタル音処理)モデルをDAW(デジタル・オーディオ・ワークステーション)上で利用可能にするプラグイン「Neutone」のβ版をリリースしました。音楽制作においてこれまでアーティストやクリエーターにとっては敷居の高かったAIの利用を、汎用的なプラグインを通じて、簡単に創作プロセスに導入することができます。また、AIの研究者やエンジニアは、本プラットフォームを通じて、新規に開発されたモデルを、簡単に音楽制作者と共有することができるようになります。
・ダウンロードはNeutone公式サイトより:https://neutone.space/
・製品紹介ビデオ:https://vimeo.com/714346096
[画像1: https://prtimes.jp/i/63351/11/resize/d63351-11-74b8a627389aeccf4466-0.png ]
■ Neutoneプラグインの主な機能
これまでAIモデルを利用する上ではPythonプログラミングの習得やGPUマシンなどの環境構築が不可欠でした。NeutoneはVST及びAudio Unit形式のプラグインとして開発され、汎用的なマシン上で動作するAbleton LiveやLogicなどのDAW上でリアルタイムに動作させることができます。
すでに多数のAI音声変換モデルが本プラグイン向けに発表されており、プラグイン内のレポジトリーよりダウンロードできます。
[画像2: https://prtimes.jp/i/63351/11/resize/d63351-11-4d1d814a672d0d78eb0e-1.png ]
下記は現在利用可能なモデルの一部の説明となります:
・RAVE.amen - 入力音をAmen Breakに変換
・RAVE.drumkit - 入力音をドラムキットに変換
・RAVE.evoice 及び RAVE.jvoice - 入力音を声に変換
・RAVE.NASA - 入力音を月面宇宙飛行士との交信風に変換
・RAVE.kora - 入力音をkora (アフリカのハープ)に変換
・RAVE.violin - 入力音をバイオリンに変換
・convld-overdrive.random - 深層学習を使ったオーバードライブ
・temporalconv.reverb - 深層学習を使ったリバーブ
これらのモデルはまだ実験的な段階のものもありますが、今後の開発によって更に量・質ともにアップデートされていく予定です。これらモデルの詳細はNeutone公式ウェブサイトよりご覧いただけます。
[画像3: https://prtimes.jp/i/63351/11/resize/d63351-11-6d98470c1235beba3ea2-2.png ]
[画像4: https://prtimes.jp/i/63351/11/resize/d63351-11-e47635a12cd64b8ceef3-3.jpg ]
また、AI研究者・開発者の方々は、ご自身の開発したモデルをNeutoneプラットフォーム上で公開することが可能です。弊社の提供するNeutoneSDKでモデルをラップすることにより、簡単にNeutoneプラグインに対応させることができます。
・開発者向けSDK:https://github.com/QosmoInc/neutone_sdk
[画像5: https://prtimes.jp/i/63351/11/resize/d63351-11-c3fd54400f60f0615cf8-4.png ]
■ AIモデルはAI音楽コミュニティの中で共創していく
NeutoneはAIモデルをホストするためのプラットフォームを提供しますが、中身のAIモデルはこれから参加される研究者・エンジニア・アーティストの皆さんと作っていきたいと考えています。特にAIモデルの開発に興味のある研究者・エンジニアやテストに興味があるアーティストの方々は、NeutoneのDiscordチャネルにご参加ください。
「Neutone」Discordチャネル:https://discord.com/invite/zaUbtyxDRZ
■ 株式会社Qosmo(コズモ)
[画像6: https://prtimes.jp/i/63351/11/resize/d63351-11-42640fcf1f94c9dcffcc-5.jpg ]
2009年設立。「アートとテクノロジーを通じて人類の創造性を拡張する」をビジョンに掲げる。アーティスト、研究者、プログラマ、デザイナーから構成されるチームが、作品制作を通して創造性のフロンティアを切り開くとともに、アーティスト・企業・個人が使えるAIツールを提供することでより多くの人が創造的に働き・学び・暮らせる社会の構築に寄与することをミッションに活動する。https://qosmo.jp
AIの活用による創造性の発展に取り組む株式会社Qosmo(本社:東京都目黒区、代表取締役社長:徳井直生、以下「コズモ」)は、深層学習を使ったリアルタイムDSP(デジタル音処理)モデルをDAW(デジタル・オーディオ・ワークステーション)上で利用可能にするプラグイン「Neutone」のβ版をリリースしました。音楽制作においてこれまでアーティストやクリエーターにとっては敷居の高かったAIの利用を、汎用的なプラグインを通じて、簡単に創作プロセスに導入することができます。また、AIの研究者やエンジニアは、本プラットフォームを通じて、新規に開発されたモデルを、簡単に音楽制作者と共有することができるようになります。
・ダウンロードはNeutone公式サイトより:https://neutone.space/
・製品紹介ビデオ:https://vimeo.com/714346096
[画像1: https://prtimes.jp/i/63351/11/resize/d63351-11-74b8a627389aeccf4466-0.png ]
■ Neutoneプラグインの主な機能
これまでAIモデルを利用する上ではPythonプログラミングの習得やGPUマシンなどの環境構築が不可欠でした。NeutoneはVST及びAudio Unit形式のプラグインとして開発され、汎用的なマシン上で動作するAbleton LiveやLogicなどのDAW上でリアルタイムに動作させることができます。
すでに多数のAI音声変換モデルが本プラグイン向けに発表されており、プラグイン内のレポジトリーよりダウンロードできます。
[画像2: https://prtimes.jp/i/63351/11/resize/d63351-11-4d1d814a672d0d78eb0e-1.png ]
下記は現在利用可能なモデルの一部の説明となります:
・RAVE.amen - 入力音をAmen Breakに変換
・RAVE.drumkit - 入力音をドラムキットに変換
・RAVE.evoice 及び RAVE.jvoice - 入力音を声に変換
・RAVE.NASA - 入力音を月面宇宙飛行士との交信風に変換
・RAVE.kora - 入力音をkora (アフリカのハープ)に変換
・RAVE.violin - 入力音をバイオリンに変換
・convld-overdrive.random - 深層学習を使ったオーバードライブ
・temporalconv.reverb - 深層学習を使ったリバーブ
これらのモデルはまだ実験的な段階のものもありますが、今後の開発によって更に量・質ともにアップデートされていく予定です。これらモデルの詳細はNeutone公式ウェブサイトよりご覧いただけます。
[画像3: https://prtimes.jp/i/63351/11/resize/d63351-11-6d98470c1235beba3ea2-2.png ]
[画像4: https://prtimes.jp/i/63351/11/resize/d63351-11-e47635a12cd64b8ceef3-3.jpg ]
また、AI研究者・開発者の方々は、ご自身の開発したモデルをNeutoneプラットフォーム上で公開することが可能です。弊社の提供するNeutoneSDKでモデルをラップすることにより、簡単にNeutoneプラグインに対応させることができます。
・開発者向けSDK:https://github.com/QosmoInc/neutone_sdk
[画像5: https://prtimes.jp/i/63351/11/resize/d63351-11-c3fd54400f60f0615cf8-4.png ]
■ AIモデルはAI音楽コミュニティの中で共創していく
NeutoneはAIモデルをホストするためのプラットフォームを提供しますが、中身のAIモデルはこれから参加される研究者・エンジニア・アーティストの皆さんと作っていきたいと考えています。特にAIモデルの開発に興味のある研究者・エンジニアやテストに興味があるアーティストの方々は、NeutoneのDiscordチャネルにご参加ください。
「Neutone」Discordチャネル:https://discord.com/invite/zaUbtyxDRZ
■ 株式会社Qosmo(コズモ)
[画像6: https://prtimes.jp/i/63351/11/resize/d63351-11-42640fcf1f94c9dcffcc-5.jpg ]
2009年設立。「アートとテクノロジーを通じて人類の創造性を拡張する」をビジョンに掲げる。アーティスト、研究者、プログラマ、デザイナーから構成されるチームが、作品制作を通して創造性のフロンティアを切り開くとともに、アーティスト・企業・個人が使えるAIツールを提供することでより多くの人が創造的に働き・学び・暮らせる社会の構築に寄与することをミッションに活動する。https://qosmo.jp









SEO関連




