見出し画像

にじボイスとAivisSpeechとそっくりな声の声優を探そう!【所感編】

導入


日本語の最近のテキスト音声合成サービスとして、にじボイスAivisSpeechが、まるで声優さんの演技のような自然な音声を生成できるとして有名です。

これらのサービスが自然な声優さんのような演技音声を合成できるということは、TTSの学習の都合上、そのような声優さんが喋っている音声を学習データとして用いている可能性が高いことになります(c.f. この謎記事)。

その「学習に使われたかもしれないキャラクターをどうやったら探せるか?」というタスクについて、実際に音声AI技術を用いてやってみたデモページが以下になります:
🤗 にじボイスとAivisSpeechとそっくりな声の声優を探そう!
体感、類似度が0.8越えのものはかなり声が似ていて信頼度が高いです。が、0.7代やそれより下は正直別人もいます。

詳しい技術的詳細については、zennに記事を書いているので、そちらもご興味のある方はご参照ください: にじボイスとAivisSpeechとそっくりな声の声優を探そう!【技術編】

類似度検索に用いたデータは日本のビジュアルノベルゲーム(いわゆるエロゲ)の音声データセットです。このnoteでは、技術的詳細は置いておいて、上記デモを聞きながら、またノベルゲームをまあまあ嗜む身として、個人的に

  • このキャラクターは絶対この声優だな(19キャラ)

  • たしかに言われてみればこの声優に聞こえる(25キャラ)

  • まあちょっと似てるっちゃ似てるね、本人かはあまり自信がないけど(6キャラ)

と大別して、感じるキャラクターについて列挙していきます。

デモを聞きながら、あなたも声がどれほど似ているか似ていないかをチェックしてみましょう。また、自分は一般声優にはあまり詳しくなく馴染みがないので、あなたが知っている声優さんでここに漏れているものは多くあるかもしれません。

注意

  • 声が似ているかどうかは、あくまでAIの数値的な判断と、個人的な耳での主観判断であり、決して音声合成AIがそのキャラクターのデータ(か同じ声優さんのデータ)で学習されたことを意味するものではありません。

  • 以下「声優」「なぜか似ている声優」を書いていますが、これは「音声AIの声と似ていると個人的に感じる声優」であって、その声優さんのデータが実際に学習元であるという意味ではありません

  • 耳がめっちゃ良いわけではなく、一般声優はあまり知らないので、見当違いな人を上げている可能性もあります

  • 「なぜか似ている声優」は、何故か似ているだけであって、何故かはわかりません

  • ゲームはR18である場合が多いので、18歳未満はゲームや声優名義での検索をしないようお願いします。

では始めていきましょう。

参考

自分より声優に詳しい人がいろいろ特定しています、内容被っているのもありますがぜひご視聴ください:
https://www.youtube.com/watch?v=zjJ7ZPtXBdY

ほぼ確実に似すぎていると感じるキャラ

AivisSpeechのAnneli

デフォルトのAnneliちゃんが、どう聞いても(デモにもある通り)つり乙2のエストの声です。エストはほんと独特のいいキャラしてて、貴族なんだかエセ貴族なんだか分からないけれども主人公との主従関係の描写が独特で、高潔で、めっちゃ好きなキャラです。正直つり乙2の他キャラルートはあまり覚えてないんですが、エストだけは声とキャラがめっちゃ好きだったことを覚えています。

声優: 野々山紅
何故か似ている声優: 山村響

以下AivisSpeechのキャラは出ないので(公式キャラがAnneliちゃんだけだし)、他キャラはすべてにじボイスのキャラです。

月城 美蘭

どう聞いてもつり乙・おとりろのりそなです、ありがとうございました。にじボイスがDMMボイスだった時代に、サンプルボイスが出た時点で一瞬でこれはわかりました。ほぼ確実です。つり乙シリーズめっちゃ好きだし、中でもりそなは声が大好きなんですよね。もちろん単純に声がそっくりというだけ以上の意味はありませんが。

声優: 咲野かなで(他名義多数)
何故か似ている声優: 又吉愛

神崎 怜司

これも聞いたときはつり乙の衣遠兄様が思い浮かびました。たぶんそうな気がします。

声優: 鳩万軍曹
何故か似ている声優: 川原慶久

ノエラ

どう聞いてもたねざ、じゃなかった桐谷華もしくは沢澤砂羽さんですありがとうございました。これもDMMボイス発表当初から絶対そうだろうと思っていました。個人的に好きなエロゲ声優上位3位に入ってます。最近はよく似た声の人がアーニャとかで活躍してて売れっ子になっており、もうエロゲには戻ってこないのかとちょっとさみしい気持ちです。
一番好きなキャラははつゆきさくらのあずま夜です。

声優: 沢澤砂羽=桐谷華(他名義多数)
何故か似ている声優: 種﨑敦美

シュネー・レオパーダ

デモだと、さっきと同じく鳩万軍曹さんですが、そもそも生成された音声ほぼ同じじゃね?って感じですね。つり乙シリーズがいっぱいあるので、それぞれで学習されたものを別キャラとして出してるとかだったら面白いですね。

声優: 鳩万軍曹
何故か似ている声優: 川原慶久

朝霧 瑞樹

これはいろセカ時雨さんだなーと聞いたときから思ってました。たぶん何故か似ている人が有名

声優: 氷河流
何故か似ている声優: 緑川光

ジャナーフ

また鳩万軍曹さんですね、そもそもまた生成音声がほぼ同じに聞こえます。

声優: 鳩万軍曹
何故か似ている声優: 川原慶久

深海 結涼

これはどう聞いても有栖川みや美さんですね、よく聞く声優の一人です、特徴的な声。

声優: 有栖川みや美
何故か似ている声優: 高田初美

三浦 隼人

どう聞いてもまいてつの主人公です、という印象で、個人的にはほぼそうだと思います。

声優: 樫野樹
何故か似ている声優: 望月英

ミミ

どう聞いてもたねざ、じゃなかった桐谷華もしくは沢澤砂羽さんですありがとうございました(2回目)。ロリ声演技のパターンですね。Clover Day'sはプレイしました、杏鈴たん可愛すぎでした。ちなみにもうひとりの妹の杏璃の声優は、上の月城美蘭さんに似ている咲野かなでさん(と声が何故か似ている人)で、こちらのロリ声演技も良かったです。

声優: 沢澤砂羽=桐谷華(他も名義多数)
何故か似ている声優: 種﨑敦美

碧海 凪

いろセカ時雨さん2人目。2つのにじボイス生成音声聞いてもほぼ同じ人の声にしか聞こえない。

声優: 氷河流
何故か似ている声優: 緑川光

跳々

どう聞いてもたねざ、じゃなかった桐谷華もしくは沢澤砂羽さんですありがとうございました(3回目)。

声優: 沢澤砂羽=桐谷華(他名義多数)
何故か似ている声優: 種﨑敦美

苔村 まりも

これはどう聞いても上原あおいさんですありがとうございました。サンプル音声聞いた段階で一瞬でわかった。ちょっと特徴的な倍音成分がある声ですよね。デモでは名義違いの子が出ています。

声優: 雪都さお梨=上原あおい(他名義多数)
何故か似ている声優: 深田 愛衣

灯真

どう聞いてもあおかなの真藤さんです、デモ音声最初に聞いたときから思ってました。これはほぼ確実だと思います。

声優: 梅咲チャーリー
何故か似ている声優: 興津和幸

桜庭 詩織

これはデモとは違う別の人の声だと思います。どう聞いても榎津まおさんです。まおまお。CROSS†CHANNELのミキミキとSWAN SONGのひばりん。ちょっと癖のある特徴的な声が大好きです。単純に参照元ゲームデータセットに声が入っていないだけだと思われます。最近の作品にはあまり出てないしね。

声優: 榎津まお
何故か似ている声優: 野中 カオリ

ミレア

これもかなりの確率で楠鈴音さんで合ってると思う。C†Cの冬子、デモでは星メモのこさめさん。聞き馴染んだ声です。

声優: 楠鈴音
何故か似ている声優: 鳴海エリカ

陽斗・エイデン・グリーンウッド

どう聞いてもあおかなの白瀬さんです、ありがとうございました。

声優: 木島宇太
何故か似ている声優: 水島大宙

桜庭 恭平

これはデモとは違う別の人の声だと思います。始めて聞いたとき俺つばの隼人だなーって気がして、サンプルや口調の荒々しさもたぶんそうとしか聞こえない。

声優: 縦溝精史
何故か似ている声優: 諏訪部順一

ヴィクター・D・アシュフォード

これはデモとは違う別の人の声だと思います。どう聞いても若本だと思います、はい。

声優: 若本規夫

言われてみれば確かに似ているキャラ

椎名結衣

デモでは、まあまあ有名な秋野花さんだと出ています。正直あまり確信はないです。秋野花さんはちょっと独特の鼻にかかったような感じがあると思うのですが、それがあるようなないような…
ですが数値的にはかなり類似度が高いです。

声優: 秋野花

タルト

かけぬけ★青春スパーキング!の橘花と類似度が高いと出ています。言われると確かにーという感じで、聞いてもかなり声質が似ていそうです。橘花はキャラの中で一番好きです(他ストーリーは正直…)

声優: 左利ぴんく (他名義多数)
何故か似ている声優: 大地葉

遠野 澄花

類似度デモでは有名な遥そらさん。デモにあるD.C.のサンプルボイスを聞いてみるとたしかにという感じ。遥そらさん、他作品ではいくつか聞いたことありますが、結構演じ分けをして声音が変わるタイプで、筆者は断言できるレベルではちょっとありません。が、手元で動かしている他の候補キャラも出すやつを聞いていると、たいてい遥そらさんが安定してほぼ上位にいるので、それっぽいかもです。

声優: 遥そら
何故か似ている声優: 仙台エリ

水戸 明日菜

花澤さくらさん、調べるとまあまあ有名らしい。プレイしたことある作品の中だと、ふゆくるの熾火さん。確かに言われてみれば。他作品のやつも類似度が高いので、それっぽさそう。

声優: 花澤さくら

フィーナ・ルナリエ

デモでは桜乃ひよさんが出ています。正直プレイした作品の中で聞いたことがないので自分から断言はできません。が、他のキャラでもワガハイのかおるこさんが出てきたりと率が高いし、サンプル聞くと似ているように感じます。書いてて気づいたけどワガハイプレイしてた。でも内容なぜか全く覚えて無くて自分には合わなかったゲームです。

声優: 桜乃ひよ
何故か似ている声優: 本多真梨子

森下 和花

桜川未央さんが出ています、数ゲームで自分も声を聞いたことあり、確かに似ている気がします。他類似キャラも桜川未央さん多めです。

声優: 桜川未央
何故か似ている声優: 小林眞紀

ロザリア・ガーネット

これはデモで確認するまで気づきませんでしたが、確かにかなりClover Day'sの瑞穂に似ています。声優は一ノ宮葵さん、自分はClover Day'sの瑞穂でしか知らないので聞き馴染みがあるとまでは行きませんが、デモ聞いてもかなり似ています。

声優: 一ノ宮葵
何故か似ている声優: 田中美幸

シャルロッテ

デモでは茅ヶ崎メイさん。この方は、自分がプレイしたことのある中にはいないようで、聞き馴染みはないので、確信はありません。デモは似ており、また他の類似度高いキャラも茅ヶ崎メイさん(別名義)なので、それっぽさそうです。

声優: 茅ヶ崎メイ(他名義多数)
何故か似ている声優: 山岡ゆり

ぽの

「見上げてごらん、夜空の星を」のひなみんこと陽南ちゃん、割と好きなキャラです。確かFDも買ったはず。最初、ぽののサンプルボイスが動物扱いの鳴き声で、そのまま話者識別に突っ込むと類似音声に喘ぎ声ばっか類似で出てきて困ったので、ちゃんとした固定した文章を朗読させようとしたきっかけになりました。朗読させて聞くと、確かに似ています。

声優: 百瀬ぽこ
何故か似ている声優: 岩﨑春奈

篠ノ井 志乃

昔からの大御所の一色ヒカルさん。言われれば確かに。デモも似てるし他キャラも一色ヒカルさん多いしそれっぽさそう。

声優: 一色ヒカル
何故か似ている声優: 田中涼子

ティニー

デモで出てる声優さんは昔からの大御所で名前は聞いたことあるけどあまり遭遇したことはなくて(ユメミルクスリのねこ子だったのか…)、確かに話し方や雰囲気は似ているが断言はちょっとできない。だが他名義キャラも上位に来ており、可能性は高そう。

声優: 茶谷やすら
何故か似ている声優: 永田佳代

春乃 セリーヌ 白鳥

「見上げてごらん、夜空の星を」の吉岡さん。言われれば確かに。断言できるほどじゃないが似ています。他候補キャラ見ても同じ声優さんが多い。

声優: 白月かなめ
何故か似ている声優: 松山紗香

つり乙ルナさま。確かに。声の特徴がそれっぽいです。口調や雰囲気からするとつり乙の声とはちょっと違う感じだけど、特徴似てる。

声優: 卯衣
何故か似ている声優: 大橋歩夕

凛堂 葵

初見声優さんですが、めっちゃ似てます。

声優: 手塚りょうこ

深沢 美咲

どのゲームでも名前をやたら見る、お馴染みのかわしまりのさん。ただ、特徴が微妙に抜けているような気がしなくもないが、でも似ているは似ている。

声優: かわしまりの
何故か似ている声優: 瑞沢渓

春玲

「見上げてごらん、夜空の星を」の早乙女先生。言われれば確かに似ているという感じ。それっぽさそう。ちなみにほぼ早乙女先生(とコロナアフター)目当てにFD買いました。

声優: 優希芹果
何故か似ている声優: 中島沙樹

高坂 茉莉

あまり遭遇したことがない声優さん。知ってる中だとあおかなの莉佳だけど、高さ的に別キャラに聞こえる。デモで声を聞くと感じが似ている。他キャラ候補も多し。

声優: 三代眞子
何故か似ている声優: 米澤円

トリッカ

名前をよく見るあじ秋刀魚さん。デモ聞くとよく似ている。自分の知っている他キャラは演技が結構違って、確信はそこまではない。ただ、相変わらず他キャラ候補にも同声優多し。

声優: あじ秋刀魚
何故か似ている声優: 前田 恵

宝泉寺 ミリア

初見声優であまり自信はない。声は確かに言われれば似ている。

声優: 清水浅葱(他名義多数)
何故か声が似ている声優: 青木瑠璃子

水瀬 玲奈

デモでは2回目の三代眞子さん。初見であまり自信はないが、確かに似ている。

声優: 三代眞子
何故か似ている声優: 米澤円

新堂 慶介

鳩マン軍曹さん数回目。衣遠兄様のキザな演技とは違う演技で、あまり自分は馴染みがないが、サノバウィッチのデモ音声を聴くとかなり似ている。

声優: 鳩万軍曹
何故か似ている声優: 川原慶久

高槻 リコ

自分はあまり馴染みないが、声はよく似ている。Twitterで検索しても疑惑を抱いている人はいた模様。

声優: 鬼頭明里

月島 千遥

男性だし初見声優さんなのであまり自信はないがよく似ている。

声優: 小次狼
何故か似ている声優: 桜木章人

春野 奏汰

同じく男性だし初見声優さんなのであまり自信はないが、演技含めよく似ている。

声優: 寺竹順
何故か似ている声優: 阿部敦

リュウセイ

言われてみれば確かにあおかなの青柳紫苑。にじボイス公式だと筋肉プロテインとか言っていてよりそれらしい。男性声優だし白瀬さんほどの確信はない。

声優: 平林哲平
何故か似ている声優: 近藤孝行

もしかしたら確かにちょっと似てるかも?くらいのキャラ

森宮 千乃

デモでは2回目の遥そらさん。ちょっとこれは自信がない。言われてみれば?くらい?

声優: 遥そら
何故か似ている声優: 仙台エリ

如月 要

男性声優で聞き馴染みないので断言はできませんが、デモは結構似ています。

声優: ワンモアチャンス
何故か似ている声優: 近藤孝行

若草 ひかり

初見の声優さんかと思ったら、最近プレイしていた「アストラエアの白き永遠」の葉月ちゃんの人。表名義調べたら表でかなり有名っぽい。確かに言われれば雰囲気や感じが結構似ていてそれっぽい。デモ聞いても似てる。

声優: 白雪碧
何故か似ている声優: 五十嵐裕美

金城 夏海

自分はあまり遭遇したことない声優さん、確信は持てない。面でかなり有名みたい。ショタキャラっぽい声なので、話者埋め込みが演技の仕方の影響受けていそうで、確信はない。表が有名なので分かる人には本当かどうかがわかりそう。

声優: 浅野ゆず(他名義多数)
何故か似ている声優: 生天目仁美

イルミル

名前は聞いたことある。が、たぶん遭遇したこと無くて確信持てないが、似ている。ただ、演技の仕方が似ているだけ説はちょっとあるかも。別キャラ候補にも同じ声優の人が多いは多い。

声優: あかしゆき
何故か似ている声優: 米島希

星川 青葉

デモでは2回目の有栖川みや美さん。だけどこっちはちょっと特徴的な感じが少なめで、あまり確信はない。あくまで参考程度。他キャラ候補も同声優さん多し。

声優: 有栖川みや美
何故か似ている声優: 高田初美

森野 颯太

男性なのもあり初見声優なのもあり自信はない。だがデモはかなり似てる。

声優: 阿部敦

橘 すずか

桜川未央さん2回目。こちらも、独特の鼻にかかる感じが音声だと弱めで、あまり自信はない。

声優: 桜川未央
何故か似ている声優: 小林眞紀

霧島 律

氷河流さん3回目。口調が荒々しい感じなのが違うが、声は似ている。

声優: 氷河流
何故か似ている声優: 緑川光

ヴィヴィアン

初見声優さんで確信はなく、個人的には言われればちょっと似てるかなーくらい。

声優: きのみ聖
何故か似ている声優: はるかひとみ

白石 玲奈

さくレットの遠子お嬢様の人。まあまあ声が似ている。そしてにじボイス公式サンプルがお嬢様っぽいので、余計似ている。ただ、そこまで自信があるわけではない。

声優: 相模恋
何故か似ている声優: 湯宮由海

最後に

類似度が0.7前半未満のキャラクターは、正直聞いてもあまり似ておらず別人と感じるものが多く、今回では特定できないキャラクターが多くいました。
とりあえず、にじボイスがデモ作成に使用した大規模ゲーム音声データセットのみから学習されたわけではない、ということは、そのことから言えるかと思われます。
しかし、一部が学習に使用されたり、また別の経路や、同じ声優別ゲーム等で学習された可能性が、ないわけではありませんが、あると断言することはできないことを再び強調しておきます。
現状のAIモデルは、学習元がクローズドにされている場合が多く、その場合、結果のモデルやAPIのみから学習元を探ろうという研究は、セキュリティその他の観点からいろいろなされてはいますが、あまり進んでいないというのが現状だと思っております。今後はそういった観点から、ある意味音声合成AIのリバースエンジニアリング的な自由研究もやっていきたいと思っています。

いいなと思ったら応援しよう!

コメント

ログイン または 会員登録 するとコメントできます。
litaginです。音声AIで遊んでいます。 🤗 https://huggingface.co/litagin
にじボイスとAivisSpeechとそっくりな声の声優を探そう!【所感編】|litagin
word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word

mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1