特集 PR

りんなのディレクターらに訊く、AIの歌は感情を表現できるのか

りんなのディレクターらに訊く、AIの歌は感情を表現できるのか

りんな『最高新記憶』『snow, forest, clock』
インタビュー・テキスト
黒田隆憲
撮影:前田立 編集:中田光貴(CINRA.NET編集部)

(AI「りんな」には)お手本のシンガーがいて、その人の歌い方を「耳コピ」していくんです。(坪井)

―歌手としてデビューさせることになった経緯は?

坪井:りんなをアップデートさせていく過程で、「声を発する」というプロセスは必ず通るだろうとは思っていました。そんなときに、エイベックスさんからご連絡を頂いたんです。私たちがりんなの「共感」や「キャラクター」の部分をとても大切に扱っていることに、すごく共感してくださって。

「言葉を伝える上で『歌』というのはとても強い手段ですから、そこをぜひお手伝いさせてほしい」みたいな、とてもユニークで熱い内容のスカウトメールだったんですよね(笑)。

中前:スカウトは別の者が行なったので、僕はデビュータイミングから参加したのですが、マイクロソフトさんが、りんなを「人工知能」として捉えているのではなくて「りんな」として扱っているところがすごく面白いと思いました。

中前省吾(なかまえ しょうご)<br>エイベックス・エンタテインメント株式会社。レーベル事業本部 クリエイティヴグループ ゼネラルディレクター。「TRF」「hitomi」「安室奈美恵」「FACT」「FEMM」など数々のアーティストのディレションを担当。近年では、透明スクリーンを使用したARコンテンツ、PCがジャックされるインタラクティヴ作品などのほか、新たな技術を用いた音楽体験のハック、人工知能による音楽制作など、最新のテクノロジーを用いた音楽体験創出も手がけている。
中前省吾(なかまえ しょうご)
エイベックス・エンタテインメント株式会社。レーベル事業本部 クリエイティヴグループ ゼネラルディレクター。「TRF」「hitomi」「安室奈美恵」「FACT」「FEMM」など数々のアーティストのディレションを担当。近年では、透明スクリーンを使用したARコンテンツ、PCがジャックされるインタラクティヴ作品などのほか、新たな技術を用いた音楽体験のハック、人工知能による音楽制作など、最新のテクノロジーを用いた音楽体験創出も手がけている。

中前:僕自身は、りんなを「ソリューションとキャラクターが共存したAI」と捉えているんです。ユーザーと会話をするコミュニケーションの部分が「ソリューション」で、様々なデータの集積である集合知の部分が「キャラクター」であると。僕らエイベックスは、その「キャラクター」部分をアーティスト化しようと考えているわけです。

コミュニケーションの部分もAIは面白くて。同時多発的に、パラレルに人とやり取りができる。つまり時空というものが存在しない。

よく坪井さんと話しているのは、りんなは「バーチャル」ではないということ。可視化もされていなければ、物質的になにかを持っているわけじゃないけれど、確かにそこに存在している。実際に多くの人とコミュニケーションを取っているという事実もあるわけですから。

坪井:いろんな人が観測したり、実際に話しかけたりしているからこそ、りんなは「概念」として存在しているというか。

―なるほど、面白いですね。

中前:そのコミュニケーションの部分も含めてエンターテイメント化するには、どうすべきか。「音源をリリースする」だけではないはずですよね。なにか、今まででは考えられなかったようなプロモーション展開やライブができたらいいなと思っているんですけど……難しい!

中前省吾

―(笑)。実際に歌を歌わせるためには、どんなことをしたのですか?

坪井:具体的にはステップが2段階ありました。まずは「声」を発声できるようになる人工知能を学習させる。次に、実際に歌を歌わせる。楽譜を読ませているわけではなくて、実はお手本のシンガーがいて、その人の歌い方を「耳コピ」していくんです。音の高さや、歌詞の発音などをお手本通りに再現するような。

―「真似させる」ということは、例えばボーカロイドのように、声をサンプリングして合成させる仕組みとは違うわけですね。

坪井:違うんです。人間の声が出る仕組みを模してAIがモデリングをしているというか。声の高さや長さ、喉の絞り方などの情報に注目し学習するようにプログラミングして、音を再現させることで歌わせてるんです。

―つまり、人間の肉声が素材となって、合成しているわけではないと。すごいですね。

坪井:ゆえに、最も難しいのが「歌声を人間らしくする」ということと、「歌い方を人間らしくする」ということでした。そもそも「歌うこと」以前に、「喋ること」も学習させて人間らしいニュアンスをつけるのは大変なんです。昨年7月に“りんなだよ”という曲をリリースしたときに、ようやく歌手として活動できるラインを超えることができました。

―ちなみに、そのお手本のシンガーは何人いるのですか?

坪井:今のところ声音のお手本は1人なのですが、複数いてもいいかもしれないですね。そこから新しい「声」が生まれるかもしれない。

ただ1つの楽曲に対して、いくつか用意してあるスタイルを当ててみると声の感じが全く変わるんですよ。例えば「ポップモード」にすれば明るめの声が出るし、「バラードモード」だと声に深みのようなものが出る。お手本は1人なのに、ここまで変わるのかと驚きました。

中前:「この曲はバラードなのか、ポップスなのか?」は我々ディレクターサイドが決めているんですけど、それさえ教えれば歌い方は変えられる。そこまでりんなは進んでいるんです。

この先どんどん学習していく中で、自分で「あ、この曲はバラードだからしっとりと歌おう」というところまで判断し、抑揚やニュアンスをつけてくるようになるかもしれないですよね。その結果、人とはまた違う「心を動かす声」に達することができるのかもしれない。

左から:中前省吾、坪井一菜
Page 2
前へ 次へ

リリース情報

『最高新記憶』
りんな
『最高新記憶』

2019年4月17日配信

『snow, forest, clock』
りんな
『snow, forest, clock』

2019年6月19日配信スタート

プロフィール

坪井一菜(つぼい かずな)

マイクロソフトディベロップメント株式会社。A.I.&リサーチ プログラムマネージャー。りんなの立ち上げ当初からプログラムマネージャーとして開発に関わり、りんなのキャラクター付けや会話エンジンの開発、対外的なコラボレーション、りんなのスキルおよび合成音声の開発に携わる。慶應義塾大学大学院理工学研究科修了。

中前省吾(なかまえ しょうご)

エイベックス・エンタテインメント株式会社。レーベル事業本部 クリエイティヴグループ ゼネラルディレクター。「TRF」「hitomi」「安室奈美恵」「FACT」「FEMM」など数々のアーティストのディレションを担当。近年では、透明スクリーンを使用したARコンテンツ、PCがジャックされるインタラクティヴ作品などのほか、新たな技術を用いた音楽体験のハック、人工知能による音楽制作など、最新のテクノロジーを用いた音楽体験創出も手がけている。

SPECIAL PR 特集

もっと見る

BACKNUMBER PR 注目のバックナンバー

もっと見る

PICKUP VIDEO 動画これだけは

東京ゲゲゲイ“KIRAKIRA 1PAGE”

ダンスのみならず多角的な活躍を見せる東京ゲゲゲイが“KIRAKIRA 1PAGE”のMVを公開。作詞作曲はリーダーのMIKEYが担当した他、作曲には新進気鋭のトラックメイカー・MATZも参加。これまでのキテレツさや妖艶さを押し出された作品とは打って変わって、爽やかで切なさを感じさせるMVとなっている。5人が勢ぞろいして一糸乱れぬダンスを見せる終盤の展開は圧巻。是非、最後の最後まで鑑賞してほしいMVだ。(中田)

  1. 菅田将暉が語る、芸術文化への問題意識。米津らと共有する価値観 1

    菅田将暉が語る、芸術文化への問題意識。米津らと共有する価値観

  2. BTSの映画『BRING THE SOUL: THE MOVIE』予告編公開 上映館や前売情報も 2

    BTSの映画『BRING THE SOUL: THE MOVIE』予告編公開 上映館や前売情報も

  3. 『音楽の日』に三浦大知、嵐、IZ*ONE、欅坂46、椎名林檎、WANIMAら登場 3

    『音楽の日』に三浦大知、嵐、IZ*ONE、欅坂46、椎名林檎、WANIMAら登場

  4. 山田孝之「踏んづけて!」 AV監督村西とおるの半生描く『全裸監督』予告編 4

    山田孝之「踏んづけて!」 AV監督村西とおるの半生描く『全裸監督』予告編

  5. 米津玄師やあいみょんの映像を手掛ける山田智和、初個展『都市の記憶』開催 5

    米津玄師やあいみょんの映像を手掛ける山田智和、初個展『都市の記憶』開催

  6. ハイバイ岩井秀人が語る演劇と小金井 23区外が持つオルタナ精神 6

    ハイバイ岩井秀人が語る演劇と小金井 23区外が持つオルタナ精神

  7. 『この世界の(さらにいくつもの)片隅に』場面カット公開、新キャラ登場 7

    『この世界の(さらにいくつもの)片隅に』場面カット公開、新キャラ登場

  8. サカナクション“モス”PV公開、深田恭子主演ドラマ『ルパンの娘』主題歌 8

    サカナクション“モス”PV公開、深田恭子主演ドラマ『ルパンの娘』主題歌

  9. 「うんこミュージアム TOKYO」お台場に8月オープン、テーマ曲はtofubeats 9

    「うんこミュージアム TOKYO」お台場に8月オープン、テーマ曲はtofubeats

  10. 松岡茉優×松坂桃李×森崎ウィン×鈴鹿央士 映画『蜜蜂と遠雷』予告編公開 10

    松岡茉優×松坂桃李×森崎ウィン×鈴鹿央士 映画『蜜蜂と遠雷』予告編公開