第170回 雲勉 Lyria が切り拓く音楽制作の未来

下記、勉強会での動画です。
https://youtu.be/-NAci5vWKx8

Transcript

1. 第170回 雲勉 Lyriaが切り拓く音楽制作の未来
2. 講師自己紹介 2 有栖川 遊 DX開発事業部 IoT×クラウドセクション コアエンジニアリンググループ グループリーダー ⚫ 入社：2023年8月 ⚫ 経歴：音楽畑を彷徨っていたらいつの間にか IT畑に辿り着いてました。 ⚫ 休日の過ごし方：音楽全般、お料理、アウト ドア少々等、色々やってます。
3. アジェンダ 3 1. 音楽制作の"今"と"課題" 2. Lyriaと共に創造する、新しい音楽制作の形 3. 広がる活用の可能性 4. デモンストレーションで創作を体験 5. まとめ
4. 1. 音楽制作の"今"と"課題" 4
5. 音楽制作の"今"と"課題" 5 誰もがクリエイターになれる時代へ しかし高品質な音楽制作には依然として高いハードルが存在する・・・ ⚫ 創造性の限界 ⚫ アイデアが枯渇し、新しいインスピレーションが見つからない ⚫ 時間的制約 ⚫ 品質の高い楽曲制作には膨大な時間とリソースが必要 ⚫ 技術的障壁 ⚫ 専門的な機材操作やスキル習得への高いハードル ⚫ ・・・もし、あなたの頭の中にある音楽のイメージを、瞬時に音にできたら？ その課題に、Googleの音楽生成AI「Lyria」が応えます！
6. 2. Lyriaと共に創造する、新しい音楽制作の形 6
7. Lyriaと共に創造する、新しい音楽制作の形 7 Lyriaとは何なのか？ 「Lyria」は、Google DeepMindによって開発された高度な音楽生成AIモデルです。 テキストの指示から、高品質な楽器演奏からボーカル曲まで、幅広い音楽を生成します。 ⚫ プロフェッショナル音質 ⚫ 様々な音楽ジャンルへ柔軟に対応、高品質な楽曲生成を実現 ⚫ 直感的コントロール ⚫ 自然言語でジャンル・雰囲気・楽器編成を自在に指定 ⚫ リアルなボーカル生成 ⚫ 感情豊かなオリジナル歌声を創造 ⚫ 信頼性保証「SynthID」 ⚫ AI生成コンテンツの透明性を確保
8. Lyriaと共に創造する、新しい音楽制作の形 8 Lyriaがもたらす価値創造 Lyriaは単なるツールではなく、貴方のクリエイティビティを拡張、増幅するパートナーです。 For Creators ⚫ 無限のインスピレーションの源泉 ⚫ アイデアの瞬時具現化 ⚫ 新しい音楽表現の探求 For Business ⚫ コンテンツ制作コストの大幅削減 ⚫ マーケティング音源の迅速な調達 ⚫ 差別化されたユーザー体験の提供
9. 3. 広がる活用の可能性 9
10. 広がる活用の可能性 10 Lyriaが革新する4つの業界と活用の可能性 Lyriaは様々な分野での活用が期待されています。 ⚫ コンテンツクリエイション ⚫ 配信者による動画BGM・オリジナル楽曲の即時制作 ⚫ 音楽プロダクション ⚫ 楽曲アイデアの高速なプロトタイピング ⚫ ゲーム・エンタメ ⚫ 世界観にマッチしたBGMの効率的制作 ⚫ 広告・マーケティング ⚫ ブランドイメージを反映したオリジナルのジングルやCM楽曲の制作
11. 広がる活用の可能性 11 SynthID、それは創造性と信頼性の両立 Googleは、AI技術の責任ある発展を最重要視しています。 SynthIDは、その理念を具現化した革新的技術です。 ⚫ SynthIDの仕組み ✓ 人間の聴覚では感知できない高度な「電子透かし」をAI生成音楽に自動埋め込み ⚫ 実現される価値 ✓ AI生成コンテンツの透明性確保 ✓ オリジナルクリエイターの権利保護 ✓ 健全なコンテンツエコシステムの構築
12. 4. デモンストレーションで創作を体験 12
13. デモンストレーションで創作を体験 13 Lyriaの操作画面と基本的な使い方 ① 作りたい音楽のイメージを文章で入力します。 ② クリックするとAIが楽曲の生成を開始します。 ③ 生成された楽曲が表示されます。 楽曲の再生、停止などが行えます。 ④ 生成した楽曲をダウンロード出来ます。 1 2 3 4
14. デモンストレーションで創作を体験 14 まずは生成してみよう 基本機能を体験してみましょう。 Lyriaは主に英語での指示を理解します。 入力プロンプト 上記のプロンプトで作成された楽曲はこちら。 [ 再生] ・・・このようにジャンルや編成を指示するだけで、即座に楽曲が生成されます。 A powerful and epic cinematic track, with a full orchestra and choir. Dramatic, intense, for a movie trailer. （パワフルで壮大なシネマティックトラック。フルオーケストラと合唱団。ドラマティックで緊張感があり、映画の予告編向け。）
15. デモンストレーションで創作を体験 15 プロンプトの構成要素 Lyriaにおけるプロンプトでは、プロンプト内の次の要素をもとに楽曲が生成されます。 ⚫ ジャンル・スタイル: ジャンル(クラシック、ジャズ)とスタイル(シネマティック、ローファイ) ⚫ ムード・感情表現: 表現したい感情(エネルギッシュ、メランコリック、平和的、緊張感) ⚫ 楽器編成: 聞きたい主な楽器(ピアノ、アコースティック ギター、弦楽オーケストラ) ⚫ テンポ・リズム: テンポ（速いテンポ、スローバラード）とリズム(シンコペーション、ワルツ) ⚫ 楽曲構成・アレンジ: 楽曲の進行や構成(ピアノのソロから始まり、ストリングスが加わる) ⚫ 音響環境・空間表現: 環境音や全体的な音響(雨の降る音、広々としたリバーブ) ⚫ 音質・制作クオリティ: 音質または録音スタイル（高品質の制作、ビンテージ録音) これらの要素を全て埋めなければいけないわけではなく、 あくまで生成する楽曲を自身のイメージに近づける為の指標と思って頂ければと思います。
16. デモンストレーションで創作を体験 16 「・・・とはいえ自らが持つイメージを 言語化してプロンプトに落とし込むこと は難しい・・ 」 このように感じる方も多いかと思います。 そんな時はイメージをそれぞれの要素に分割して 作成してみることをお勧めします。 以降は左記のテンプレートを使用します。 # Genre and Style 主な音楽カテゴリを記述する。 # Mood and Emotion 表現したい感情や雰囲気を記述する。 # Instruments 主な楽器の構成や演奏方法を記述する。 # Tempo and Rhythm 楽曲のリズムや速さを指定する。 # Arrangement/Structure 楽曲のキーやコード進行、アレンジについて記述する。 # Soundscape/Ambience 全体的なエフェクトや音響構成を記述する。 # Production Quality 録音品質やスタイルを記述する。
17. デモンストレーションで創作を体験 17 前述の楽曲生成に使用したプロンプトをテンプレートに当てはめると以下のようになります。 A powerful and epic cinematic track, with a full orchestra and choir. Dramatic, intense, for a movie trailer. （パワフルで壮大なシネマティックトラック。フルオーケストラと合唱団。ドラマティックで緊張感があり、映画の予告編向け。） # Genre and Style A powerful and epic cinematic track. # Mood and Emotion Dramatic Intense For a movie trailer # Instruments Full orchestra Choir ジャンルとスタイル: パワフルで壮大なシネマティックトラック ムードと感情: ドラマティックで緊張感があり、映画の予告編 向け 楽器: フルオーケストラと合唱団
18. デモンストレーションで創作を体験 18 ジャンルを決める まずは大枠のジャンルを決めてみましょう。 馴染みのあるジャンルから選んでみたいと思います。 今回はJ-POPバラードに設定してみました。 [ 再生] ここから更にイメージを具体的にしていきたいと思います。 # Genre and Style J-Pop ballad.
19. デモンストレーションで創作を体験 19 ムードと感情を追加する せっかくのバラードなのでもう少し感動的にしてみたいと思います。 そのまま「感動的」というワードを「ムードと感情」に設定してみます。 [ 再生] 感じ方は人それぞれかと思いますが、ジャンルのみ指定した場合と比べ、 更に涙腺に訴えかけるような雰囲気が追加されたかと思います。 # Genre and Style J-Pop ballad. # Mood and Emotion Deeply emotional.
20. デモンストレーションで創作を体験 20 楽器を追加する J-POPのバラードなのにボーカルが居ません、ということでボーカルを追加してみましょう。 今回は女性ボーカルを追加してみます。 さて生成された楽曲はどうなったでしょうか？ [ 再生] # Genre and Style J-Pop ballad. # Mood and Emotion Deeply emotional. # Instruments Lead Vocal (Female)
21. デモンストレーションで創作を体験 21 なぜ追加したはずの女性ボーカルが歌ってくれないのか？ Lyriaは楽曲の生成時に自動で楽器の構成やそれぞれの優先度を決める傾向があるようです。 これは今回のように明示的に楽器を指定した場合においても同様で、 この「追加したはずの楽器が居ない」という状況は特にソロ楽器で顕著に見られます。 例：ボーカルやギターソロなど J-POPというジャンルは基本的に歌モノであり、大部分でボーカルが最優先される構成です。 我々は無意識にギターソロならぬボーカルソロを普段は耳にしているとも言えます。 こういった背景から、今回の事象はボーカルも「伴奏楽器の一部」と見なされていると考えられます。
22. デモンストレーションで創作を体験 22 楽器の優先度を追加する ボーカルが最優先であるということをプロンプトに加えてみます。 また、併せて楽曲の冒頭から歌い始めるように設定してみます。 [ 再生] ボーカルの優先度とタイミングを指定したことによりボーカルが再生されるようになりました。 # Genre and Style J-Pop ballad. # Mood and Emotion. Deeply emotional. Female lead vocal as the main focus. # Instruments Lead Vocal (Female): Sings a melody from the very first second.
23. デモンストレーションで創作を体験 23 更にイメージを研ぎ澄ます さて、ここまででボーカルが再生されるようになりました。 しかし、あくまで楽曲の冒頭から歌い始めるように設定したのみなので、 生成される楽曲内のどの部分(Aメロやサビ等)を歌うか？についてはその時々で変わってきます。 やはり楽曲内で最も印象的な部分であるサビを聞きたいですよね？ サビについては楽曲内で最も盛り上がる部分でもあるので記憶に残りやすく、 且つ、主に高音域で歌われることが多いです。 次項ではこの「サビというもの」の特徴をプロンプトに追加していきます。
24. デモンストレーションで創作を体験 24 サビとは何か？を伝える 今回は「涙が出るほど記憶に残る悲しいメロディ」であることに加え、 ボーカルは楽曲の冒頭から「高音域で」歌い始めるように設定してみます。 [ 再生] これまで生成したものと比べても格段に楽曲の盛り上がりを感じるようになったかと思います。 # Genre and Style J-Pop ballad. # Mood and Emotion. Deeply emotional. Female lead vocal as the main focus. Memorable, sad melody chorus that makes you cry. # Instruments Lead Vocal (Female): Sings a melody in a high register from the very first second.
25. デモンストレーションで創作を体験 25 楽曲の完成＝自分の持つイメージを楽曲に投影し尽くした時 楽曲をより良いものにする為のブラッシュアップはイメージが湧く限り、終わりはありません。 例えば構成される楽器を追加し、どのように演奏するか？の指示を追加したり、 よりイメージに近づけるためにムードと感情に連想されるワードやニュアンスを追加したり、 作曲の知識がある方であれば調や音階、コード進行、BPM、演奏方法等、詳細な指示を追加したり様々 です。 参考にここまでで作成したプロンプトを私が更にブラッシュアップしてみた内容についても次項で紹介 させて頂きます。
26. デモンストレーションで創作を体験 26 # Genre and Style J-Pop ballad. # Mood and Emotion Deeply emotional. Female lead vocal as the main focus. Soaring, and memorable, sad melody chorus that makes you cry. # Instruments Lead Vocal (Female): Sings a memorable, soaring melody in a high register from the very first second. Her voice is at full emotional power. Acoustic Drums: A powerful, full ballad beat, with impactful cymbal crashes on the downbeat of the AbM7 and Gm7 chords. Piano & Strings: Play powerful, resonant chords and lush, cinematic layers, both at full volume from the instant the track begins. Acoustic Guitar: Energetic strumming that provides rhythmic texture. Bass: A solid, driving root note pattern. # Tempo and Rhythm Tempo: 76 BPM # Arrangement/Structure Key: C minor Chord Progression: AbM7 - Bb7 - Gm7 - Cm - AbM7 - Bb7 - Gm7 - Cm 本登壇の最終プロンプト [ 再生]
27. 5. まとめ 27
28. まとめ 28 Lyriaが切り拓く音楽制作の未来 ⚫ 課題の克服 ⚫ 「創造性・時間・技術」の壁を打ち破り、誰もがクリエイターになれる時代を実現します。 ⚫ 直感的な操作 ⚫ 自然言語でプロ品質の楽曲からリアルなボーカルまで、思いのままに生成可能です。 ⚫ 創作の深化 ⚫ 単なる自動生成ではなく、イメージを追求できる、クリエイターの能力を拡張するツールです。 ⚫ 広がる可能性 ⚫ コンテンツ制作から広告・マーケティングまで、ビジネスシーンで迅速かつ高品質な音源を提供。 ⚫ 信頼できるAI ⚫ 「SynthID」技術によりAI生成の透明性を確保し、クリエイターとコンテンツエコシステムを守ります。 Lyriaは、音楽の「作り手」と「聞き手」の双方にこれまでにない豊かで新しい体験を提供します。 あなたもLyriaと共に、音楽制作の新しい可能性を探求してみませんか？