ゆかりねっとコネクター

話した言葉を字幕にして、さらに翻訳まで出来る配信支援アプリです。
ゆかりねっとと併用すると、ボイスロイド音声と字幕を連動出来ます。
音声認識はUDトークとゆかりねっとに対応しています。
結果をAviUtilに流し込んだり、AviUtilレイヤを翻訳したりもできます。

ダウンロード(Download)

・Add : I made it possible to use VaNiiAlert and VaNiiGrass.
 VR用の通知合成アプリ「VaNiiAlert」に対応しました。
 VR用の画面合成アプリ「VaNiiGrass」に対応しました。
・Modify:Adjust application drawing response.
 描画レスポンスの改善

開発版(Deverop Version)

・OBSだけですが、追加翻訳を流し込めるようになりました。
 ※翻訳を増やすと、通信の関係で表示ラグが増えます
 ※合言葉を入れないと有効化されません
 ※レスポンスはGoogle翻訳のほうが速いようです。

※合言葉枠に「jasmine」を打つと動作テストに参加できます。
 試した結果はぜひTwitterなどレポートください!。

うまく動かないとお悩みの方へ

  • 旧バージョンでは翻訳が機能しないので、新バージョンに更新をお願いします。
  • よくわからなければ、twitterで質問してみてください。
    (#ゆかりねっとコネクター などをつけると こちらも反応しやすいです)

活用例

ヘビーユーザさんを紹介します!

マジック:ザ・ギャザリング実況

曳山まつりか@バーチャルメイドデュエリスト‏ @hikiyamajasmineさん:
https://www.twitch.tv/hikiyamamatsurika  

花山 茶菜 🌹 🗻 🍵 🍀Vの者‏ @Hana_Yama_Sanaさん:
https://www.twitch.tv/sana_hanayama

ゲーム実況

ぱきち 🥒@Fortnite‏ @Pakichannelさん
https://www.twitch.tv/pakichi

みきゅれむ @mikyuremさん:
https://www.twitch.tv/mikyurem
「 まだまだ英語は勉強中で上手く話せないことが多いのですが、ゆかりねっとコネクターのお陰で気軽にコミュニケーションを楽しむことが出来ています♫ 」

社畜のキジュン★Fallout76‏ @KIJUN_019さん:
https://www.twitch.tv/kijun_skm
「 良かったことは、トルコ人の友人が出来たことです 」

Youtube動画

ZtgKuuto 📚ざつがクート 📚雑学V.avtr‏ @ZtgK_TRIVIA さん:
https://www.youtube.com/channel/UCtS_sguecEp5GgVZWzPNo4A

《随時掲載・更新していきます》

使い方

 図解しているnoteをみてみてください。
  ■基本的な使い方解説 (実況解説環境整備の解説)
  ■動画配信に字幕をつける(これができるまでの経緯等)
  ■ v1.5拡張版1の説明はこちらにおいてあります。
  ■v1.8cから、ゆかりねっと本体の音声認識を使う方法をサポートしました。
  ■v2.0から、OBS Studioへの直接字幕転送をサポートしました。
  ■v2.2から、Microsoft翻訳の辞書補正をサポートしました。
  ■接続までのフローチャートはこちら。参考にどうぞ。

出来ること

・ゆかりねっとで認識した言葉を他国語翻訳して表示・合成ができます。
・地声勢の方はUDトークとゆかりねっとコネクターだけで字幕合成可能!
・音声認識エンジンをUDトーク(AmiVoice Cloud)に変えられます。
 (もちろん、ゆかりねっと標準のGoogle認識エンジンも使えます
まあちゃんを合わせて使えば、速記のデータも取り込みが可能です。
・字幕として認識したデータは、動画編集ソフトに取り込めます
ゆかりねっとのログから発話ログを取り出し字幕作成に利用できます。
配信用ソフトOBSに字幕を直接流し込めるので綺麗な配信ができます。

補足

  • 活用例をぜひ教えてください。HPやtwitterに掲載します。
  • 一部機能は、FANBOXで得たキーワードを入力するとロック解除されます。
  • ゆかりねっとの音声認識をUDトークに差し替えるには、ゆかりねっとの設定で、chromeの代わりにこのアプリ(実行ファイルmachan_yukarinetteconnector.exe)を選択してください。
  • なにか問題・リクエストあれば twitter @mikasa231までお願いします。
  • 動作がおかしい場合は設定→初期化をお試しください。

支援募集中!

過去のバージョン

Yukarinette Connector v2.9b (2019/7/6)
・Add : I made it possible to use VaNiiAlert and VaNiiGrass.
 VR用の通知合成アプリ「VaNiiAlert」に対応しました。
 VR用の画面合成アプリ「VaNiiGrass」に対応しました。

Yukarinette Connector v2.85 (2019/6/24)
・Add : speak delay option.   
 翻訳結果を話すタイミングを調整可能に。
・Optimize:translation response.
 翻訳レスポンス調整

Yukarinette Connector v2.83 (2019/6/16)
・Translate menu.   
 メニューを翻訳(対応:英語、日本語)
・Fixed API error
 API使用時のエラー対応を修正
・Speaking a translate text with Bouyomi-chan
 棒読みちゃんによる翻訳文の読み上げに対応
・Fixed logic : test keyword , etc.
 プロモーションコード判定の修正 その他。
・Fix system architecture issues.
 プログラム構造上の問題を修正

v.2.82より前のバージョンの公開は終了しました。