つくよみちゃんトークソフトのv.1.1.0へのアップデート

f:id:shirowanisan:20210516125117p:plain

v.1.1.0へのアップデートに関して

つくよみちゃんトークソフトのv.1.1.0をリリースしました。下記のリンクより体験することができます。

デモ音声はこちらです。

「シロワニさんのつくよみちゃんトークソフト」をバージョン1.1.0にアップデートしました。

■シロワニさんのつくよみちゃんトークソフトhttps://t.co/EyKaowNjx0
■動画イラスト素材：花兎*様 pic.twitter.com/OK2W3AiPGg
— シロワニさん (@shirowanisan) 2021年6月2日

品質の変わったところ

学習データを追加したことにより、感情的な音声を生成できるようになりました。

ただ、文章によって「明るい声」と「暗い声」が変わるため、使いにくくなった面もあるかもしれません。

これは、文章のみで音声を予測しているため、『学習データ内の「明るい声」で読まれた文章は「明るい声」で予測する、「暗い声」で読まれた文章は「暗い声」で予測する。』ということが起こっているからです。

テクニックとして、「つくよみちゃん、＜明るく言わせたい言葉＞」のように、頭につける言葉で感情を操作できたりはします。

機械学習モデルをどのように改善したか

基本的にはv.1.0.0のときと同じ技術です。

参考：つくよみちゃんトークソフトの作り方 - シロワニさんの機械学習ブログ

つくよみちゃん部分の音声データを100文から増やしました。

具体的には「つくよみちゃんプロジェクト」の企画者である夢前黎さんの音声作品と、動画のナレーションの音声データを追加しています。

この音声データは、機械学習用の音声データとしての一般配布はされていませんので、気になる方はつくよみちゃんご本人にご相談ください。

こちらのアップデートでは、つくよみちゃん側から追加の音声データを提供いたしました。それにより、明るい声と暗い声が学習されました。

諸事情により不特定多数の方に対しての一般配布はできませんが、「俺にもくれ」という方がいらっしゃいましたら、お気軽にお声がけください！ https://t.co/xZfTIQAdjZ
— つくよみちゃん【フリー素材キャラクター】 (@TYC_Project) 2021年6月2日