update
This commit is contained in:
wataru
parent
8e2603b91e
commit
63d58b82b5
50
README.md
50
README.md
@ -1,31 +1,29 @@
|
|||||||
VC Helper
|
VC Helper
|
||||||
----
|
----
|
||||||
|
# VC Helperとは
|
||||||
# 概要
|
[VC Helper](https://github.com/w-okada/voice-changer)はAIを使ったリアルタイムボイスチェンジャー[MMVC](https://github.com/isletennos/MMVC_Trainer)のヘルパーアプリケーションです。MMVCで必要となるトレーニング用の音声の録音とボイスチェンジャを各種プラットフォームでお手軽に実行できます。
|
||||||
AIを使ったリアルタイムボイスチェンジャー[MMVC](https://github.com/isletennos/MMVC_Trainer)のヘルパーアプリケーションです。
|
[解説動画](https://www.nicovideo.jp/watch/sm41507891)
|
||||||
|
|
||||||
|
|
||||||
MMVCで必要となる一連の作業（トレーニング用の音声の録音、トレーニング、ボイスチェンジャ）の中で、音声の録音とボイスチェンジャを各種プラットフォームでお手軽に実行できます。
|
|
||||||
|
|
||||||
※ トレーニングについては[公式ノートブック](https://github.com/isletennos/MMVC_Trainer)をご利用ください。
|
※ トレーニングについては[公式ノートブック](https://github.com/isletennos/MMVC_Trainer)をご利用ください。
|
||||||
|
|
||||||
[解説動画](https://youtu.be/MOPqnDPqhAU)
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
このアプリケーションを用いることで、以下のことを簡単に行うことができます。
|
|
||||||
|
|
||||||
- MMVCトレーニング用の音声録音
|
# 特徴
|
||||||
- MMVCモデルを用いたリアルタイムボイスチェンジャー
|
1. 複数のプラットフォームで動作
|
||||||
- リアルタイム話者切り替え
|
Windows, Mac(M1等Apple silicon), Linux, Google Colaboratoryでの動作をサポートしています。
|
||||||
- CPU/GPU切り替え
|
|
||||||
|
|
||||||
|
2. 音声録音用アプリのインストールが不要
|
||||||
|
音声録音をGithub Pagesにホストしてあるアプリケーション上で実行可能です。全てブラウザ上で動くため、特別なアプリケーションのインストールは不要です。また、完全にブラウザアプリケーションとして動くのでデータがサーバに送信されることもありません。
|
||||||
|
|
||||||
|
3. ボイチェンを別のPC上で実行して負荷を分散
|
||||||
本アプリケーションのリアルタイムボイスチェンジャーは、サーバ・クライアント構成で動きます。MMVCのサーバを別のPC上で動かすことで、ゲーム実況など他の負荷の高い処理への影響を抑えながら動かすことができます。
|
本アプリケーションのリアルタイムボイスチェンジャーは、サーバ・クライアント構成で動きます。MMVCのサーバを別のPC上で動かすことで、ゲーム実況など他の負荷の高い処理への影響を抑えながら動かすことができます。
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
# 使用方法
|
# 使用方法
|
||||||
詳細は[こちら](https://zenn.dev/wok/articles/s01_vc001_top)に纏まっています。
|
詳細は[こちら(v.1.3.x)](https://zenn.dev/wok/books/0002_vc-helper-v_1_3)に纏まっています。
|
||||||
|
(v1.5.xは[こちら](https://zenn.dev/wok/books/0003_vc-helper-v_1_5))
|
||||||
|
|
||||||
# (1) レコーダー（トレーニング用音声録音アプリ）
|
# (1) レコーダー（トレーニング用音声録音アプリ）
|
||||||
MMVCトレーニング用の音声を簡単に録音できるアプリです。
|
MMVCトレーニング用の音声を簡単に録音できるアプリです。
|
||||||
@ -37,9 +35,6 @@ Github Pages上で実行できるため、ブラウザのみあれば様々な
|
|||||||
[解説動画](https://youtu.be/s_GirFEGvaA)
|
[解説動画](https://youtu.be/s_GirFEGvaA)
|
||||||
|
|
||||||
|
|
||||||
詳細については[こちら](https://zenn.dev/wok/articles/s01_vc002_record_voice_for_mmvc)をご確認ください。
|
|
||||||
|
|
||||||
|
|
||||||
# (2) プレイヤー（ボイスチェンジャーアプリ）
|
# (2) プレイヤー（ボイスチェンジャーアプリ）
|
||||||
MMVCでボイチェンを行うためのアプリです。
|
MMVCでボイチェンを行うためのアプリです。
|
||||||
|
|
||||||
@ -64,7 +59,7 @@ MMVCのモデルをトレーニングが完了している場合、既にColabor
|
|||||||
Windows版とMac版を提供しています。事前準備は必要ありません。
|
Windows版とMac版を提供しています。事前準備は必要ありません。
|
||||||
|
|
||||||
|
|
||||||
・Mac版はダウンロードファイルを解凍したのちに、MMVCServerSIOをダブルクリックしてください。開発元を検証できない旨が示される場合は、再度コントロールキーを押してクリックして実行してください。（詳細下記 *1）
|
・Mac版はダウンロードファイルを解凍したのちに、MMVCServerSIOをダブルクリックしてください。開発元を検証できない旨が示される場合は、再度コントロールキーを押してクリックして実行してください(or 右クリックから実行してください)。（詳細下記 *1）
|
||||||
|
|
||||||
・Windows版は、directML版とGPU版を提供しています。環境に応じたzipファイルをダウンロードしてください。ダンロードしたzipファイルを解凍して、MMVCServerSIO.exeを実行してください。
|
・Windows版は、directML版とGPU版を提供しています。環境に応じたzipファイルをダウンロードしてください。ダンロードしたzipファイルを解凍して、MMVCServerSIO.exeを実行してください。
|
||||||
|
|
||||||
@ -72,10 +67,13 @@ Windows版とMac版を提供しています。事前準備は必要ありませ
|
|||||||
|
|
||||||
・NvidiaのGPUをお持ちでない方はonnxdirectMLが含まれるファイルをご利用ください。多くの場合は、onnxdirectML_nocudaの方で動きます。環境によって極まれにgpuが認識されない場合があります。その場合はonnxgpu_cudaの方をご利用ください。（サイズが大きく違います。）
|
・NvidiaのGPUをお持ちでない方はonnxdirectMLが含まれるファイルをご利用ください。多くの場合は、onnxdirectML_nocudaの方で動きます。環境によって極まれにgpuが認識されない場合があります。その場合はonnxgpu_cudaの方をご利用ください。（サイズが大きく違います。）
|
||||||
|
|
||||||
・リモートからアクセスできるようにする方法など、より詳しくは[こちら](https://zenn.dev/wok/articles/s01_vc001_top)をご覧ください。
|
・リモートからアクセスできるようにする方法など、より詳しくは[こちら](https://zenn.dev/wok/books/0002_vc-helper-v_1_3)をご覧ください。
|
||||||
|
|
||||||
|
### アルファ版(for v.1.5.x)
|
||||||
### 最新バージョン
|
- [MMVCServerSIO_win_cuda_v.1.5.0.3a.zip](https://drive.google.com/file/d/1WxUyZ69Hbuu6p6TBvW0DX0Qt2a-2NQlw/view?usp=sharing) 2.5GB
|
||||||
|
- [MMVCServerSIO_mac_cpu_v.1.5.0.3a.zip](https://drive.google.com/file/d/1u9sc0so1w5kkf_g8UBTVJ61gAQ84W2oF/view?usp=sharing) 509MB
|
||||||
|
-
|
||||||
|
### 最新バージョン(for v.1.3.x)
|
||||||
- [MMVCServerSIO_mac_onnxcpu_v.1.3.7.2.zip](https://drive.google.com/file/d/1AcJaQXH8ZtlCSrifvRBWdat19HD_A2fr/view?usp=sharing) 365MB
|
- [MMVCServerSIO_mac_onnxcpu_v.1.3.7.2.zip](https://drive.google.com/file/d/1AcJaQXH8ZtlCSrifvRBWdat19HD_A2fr/view?usp=sharing) 365MB
|
||||||
- [MMVCServerSIO_win_onnxdirectML_cuda_v.1.3.7.2.zip](https://drive.google.com/file/d/1WKW3uqmIi9D13Jzao8jWVqx2KANmmQji/view?usp=sharing) 2050MB
|
- [MMVCServerSIO_win_onnxdirectML_cuda_v.1.3.7.2.zip](https://drive.google.com/file/d/1WKW3uqmIi9D13Jzao8jWVqx2KANmmQji/view?usp=sharing) 2050MB
|
||||||
- [MMVCServerSIO_win_onnxdirectML_nocuda_v.1.3.7.2.zip](https://drive.google.com/file/d/1b8Lqwb7emvd85NwRANPglKWzceJYcgBg/view?usp=sharing) 286MB
|
- [MMVCServerSIO_win_onnxdirectML_nocuda_v.1.3.7.2.zip](https://drive.google.com/file/d/1b8Lqwb7emvd85NwRANPglKWzceJYcgBg/view?usp=sharing) 286MB
|
||||||
@ -83,7 +81,11 @@ Windows版とMac版を提供しています。事前準備は必要ありませ
|
|||||||
- [MMVCServerSIO_win_onnxgpu_nocuda_v.1.3.7.2.zip](https://drive.google.com/file/d/1ST7g6jCNm_xe_Q6bj_O-50RMFTDNt_u0/view?usp=sharing) 380MB
|
- [MMVCServerSIO_win_onnxgpu_nocuda_v.1.3.7.2.zip](https://drive.google.com/file/d/1ST7g6jCNm_xe_Q6bj_O-50RMFTDNt_u0/view?usp=sharing) 380MB
|
||||||
|
|
||||||
|
|
||||||
### 過去バージョン
|
### 過去バージョン(for v.1.5.x)
|
||||||
|
- [MMVCServerSIO_win_cuda_v.1.5.0.1a.zip](https://drive.google.com/file/d/1Am0awpHS7NAotITdbnEPg4gl4lxvgWhX/view?usp=sharing) 2.5GB
|
||||||
|
- [MMVCServerSIO_mac_cpu_v.1.5.0.1a.zip](https://drive.google.com/file/d/19yREPKWe88ycAFPXCPVVYnUatlYfYjTS/view?usp=sharing) 449MB
|
||||||
|
|
||||||
|
### 過去バージョン(for v.1.3.x)
|
||||||
- [MMVCServerSIO_mac_onnxcpu_v.1.3.7.0.zip](https://drive.google.com/file/d/1K_ihZ8hxbQq10qrxM1WUfUaj_vY6zwrW/view?usp=sharing) 154MB
|
- [MMVCServerSIO_mac_onnxcpu_v.1.3.7.0.zip](https://drive.google.com/file/d/1K_ihZ8hxbQq10qrxM1WUfUaj_vY6zwrW/view?usp=sharing) 154MB
|
||||||
- [MMVCServerSIO_win_onnxdirectML_cuda_v.1.3.7.0.zip](https://drive.google.com/file/d/1IJHazaV60ophM6fbmzugZEjulLpBVJUi/view?usp=sharing) 1962MB
|
- [MMVCServerSIO_win_onnxdirectML_cuda_v.1.3.7.0.zip](https://drive.google.com/file/d/1IJHazaV60ophM6fbmzugZEjulLpBVJUi/view?usp=sharing) 1962MB
|
||||||
- [MMVCServerSIO_win_onnxdirectML_nocuda_v.1.3.7.0.zip](https://drive.google.com/file/d/1_VzdUpiWb8lbIKNppwsFM5pYCAnixOap/view?usp=sharing) 198MB
|
- [MMVCServerSIO_win_onnxdirectML_nocuda_v.1.3.7.0.zip](https://drive.google.com/file/d/1_VzdUpiWb8lbIKNppwsFM5pYCAnixOap/view?usp=sharing) 198MB
|
||||||
@ -94,8 +96,6 @@ Windows版とMac版を提供しています。事前準備は必要ありませ
|
|||||||
https://user-images.githubusercontent.com/48346627/212569645-e30b7f4e-079d-4504-8cf8-7816c5f40b00.mp4
|
https://user-images.githubusercontent.com/48346627/212569645-e30b7f4e-079d-4504-8cf8-7816c5f40b00.mp4
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
*1 本ソフトウェアは開発元の署名しておりません。下記のように警告が出ますが、コントロールキーを押しながらアイコンをクリックすると実行できるようになります。これはAppleのセキュリティポリシーによるものです。実行は自己責任となります。
|
*1 本ソフトウェアは開発元の署名しておりません。下記のように警告が出ますが、コントロールキーを押しながらアイコンをクリックすると実行できるようになります。これはAppleのセキュリティポリシーによるものです。実行は自己責任となります。
|
||||||
|
|
||||||
|
|
||||||
@ -108,8 +108,6 @@ https://user-images.githubusercontent.com/48346627/212569645-e30b7f4e-079d-4504-
|
|||||||
|
|
||||||
[WSL2とAnacondaのインストールの解説動画](https://youtu.be/fba9Zhsukqw)
|
[WSL2とAnacondaのインストールの解説動画](https://youtu.be/fba9Zhsukqw)
|
||||||
|
|
||||||
操作方法は[こちら](https://zenn.dev/wok/articles/s01_vc007_mmvc_with_linux_wsl2)をご覧ください。
|
|
||||||
|
|
||||||
## リアルタイム性
|
## リアルタイム性
|
||||||
|
|
||||||
GPUを使用するとほとんどタイムラグなく変換可能です。
|
GPUを使用するとほとんどタイムラグなく変換可能です。
|
||||||
|
|||||||
Loading…
x
Reference in New Issue
Block a user