【Let's Try!】How to Use LoRA & Easy Creation Method (kohya's GUI) 

コメントありがとうございます！ 参考になったようでよかったです😊

ありがとうございます！ お役に立てたようでよかったです😊 「サブキャラ」いいですね！

@Hesen_1048 コメントありがとうございます！ ぜひ、いろんなLoRA作ってみてください～😊

わたしと同じ悩みの方いらっしゃった！！！

そうですね。基本的には、LoRAの学習に使ったモデルと同じモデルで画像を生成するのが、一番再現性が高いです。 あとは、サンプルではembeddingや他のLoRAを重ねて使っているものの、自分の環境にはファイルがダウンロードされていないので、プロンプトで指定しても機能しない、みたいなことも要因だったりします。

@@InIchiGaSan 使用モデルがわかっても使用VAEがわからなくて画像そのものが8bitみたいになってしまうことも多々あって、結局使い慣れたモデルの中からシラミ潰しにしてそれっぽく見える物を出力させてるのが現状です＾＾；

最近のアップデートで、Kohya's GUIのインストール時（もしくは学習実行時？）に自動でfp16 or bf16を判断して設定してくれるようになったのかもしれませんね。 LoRA学習が問題なく進むようであれば、特に設定する必要はないのかな、と思います。

そうですねーー、LoRA作りは試行錯誤の繰り返しで丁度いいパラメーターの設定値を探っていくしかないのですが、 1. Kohya's GUIの設定画面でMax resolutionを1024, 1024にしているか確認 2. 学習データの角度やポーズの種類を増やしてみる 3. 学習ステップ数に幅を持たせて試してみる などでしょうか？ DimensionとAlphaの設定については、私も完璧に理解しているわけではないですが、ちょっと学習量が足りないかな？と思ったときはDimensionを増やしてみて、AlphaはDimensionの半分くらいに設定しています。

Kohya's GUIのUIがアップデートされているようで、LoRA→Trainingタブの中にModelという項目があり、その中にPretrained model name or pathがあるはずなので、そこに学習に使うモデルを設定できるはずです。

@@InIchiGaSan ご丁寧にありがとうございます！試してみます！

Google Colabでもできると思いますが、無料版だと制限があって、長時間の学習に向いていなかったりします。

@@InIchiGaSan ありがとうございます。 プロで契約しました。 しかし起動と生成に時間がかかる。使いすぎたらできなくなるなど色々不便だとわかりました。

PyTorchのバージョンが2.4.0だと動かないようで、↓のリンクから古いバージョンのPyTorch 2.3.1をインストールしてからinstall.bat→launch_user.batを実行すると、うまく起動できると思います。 【リンク】 pytorch.org/get-started/previous-versions/#v231 【コマンド】CUDAのバージョンによってコマンドが違いますが、とりあえず12.1から試してみるといいと思います。 # CUDA 11.8 pip install torch==2.3.1 torchvision==0.18.1 torchaudio==2.3.1 --index-url download.pytorch.org/whl/cu118 # CUDA 12.1 pip install torch==2.3.1 torchvision==0.18.1 torchaudio==2.3.1 --index-url download.pytorch.org/whl/cu121

@@InIchiGaSan 動画ありがとうございます！昨日からAI生成を始めた者なのですが、私もそこで引っかかってしまいました。launch_user.batを起動すると Error loading "C:\Users\〇〇〇\AppData\Local\Programs\Python\Python310\lib\site-packages\torch\lib\fbgemm.dll" or one of its dependencies.と表示されてしまいます。 pytorchをインストール（使用）する為にはCUDA、VisualBasic、Windows ML、Windows SDK（MLを使用するためのもの）、Anacondaのインストールはマストなんでしょうか？ 入っているのか入っていないのかすら分からず行き詰まってしまっています。orz

ご質問ありがとうございます！ launch_user.batで起動する前に、intall.batというバッチファイルがあるはずなので、そちらを実行してからlaunch_user.batバッチファイルを起動してみてください。 この順番でバッチファイルを起動していけば、data-set-tag-editorのURLが表示されるのではないかと思います。

その手順でやっているのですができません

なるほど。 この手順でやってみてうまくいかないということは、requirementを確認してみた方がいいかもしれないですね。 こちらの動画ではサラッと省略してしまっているのですが、dataset-tag-edidor-standaloneのgithubページにrequirementという項目があり、PythonやPyTorchなどをインストールしている必要があります。 過去に(Stable Diffusion webUIをインストールするタイミングなど)すでにrequirementで必要なものをインストール済みだったので、この動画では特にエラーが出なかったということが考えられるので、一度requirementの条件を満たしているか確認してみるのがいいかもしれません。

@@InIchiGaSan ありがとうございます試してみます。またわからなかったらお聞きしてもよろしいでしょうか…？

はい😊 お気軽にご連絡ください！

ご指摘ありがとうございます！ そうですね。動画作成してからだいぶ時間が経ってしまっているので、更新版検討してみます！

以下を試してみるのはいかがでしょうか？ インストールの問題: 動画の中でrequirements.txtファイルにfastapi==0.95.2を追加していますが、バージョンのアップデートに伴い、これが不要になった可能性も考えられます。 画像ファイルの問題: 画像ファイル自体に問題がある可能性も考えられます。画像ファイルが破損していたり、サポートされていない形式等。 画像のパスやディレクトリの設定の問題: 画像パスに特定の文字（日本語やスペースなど）が入っていると、うまくディレクトリを読み込めない可能性があります。 あとは、以下のリンクの下のほうにトラブルシューティングがあるので、こちらを確認してみるなどでしょうか。 github.com/toshiaki1729/dataset-tag-editor-standalone/blob/main/README-JP.md

@@InIchiGaSan ありがとうございます！！頂いたアドバイスを全て試してみます！！

ご質問ありがとうございます！ bf16もfp16もメモリの使用量はそこまで変わらないはずなので、bf16でも大丈夫だと思います。 ただ、一部のGPUやライブラリではbf16がサポートされていないこともあるので、うまく学習ができない場合は、fp16を選んでみてください。

@@InIchiGaSan ありがとうございます🙇‍♂

んーー🤔 アニメ系を生成しようとして実写系が出てきてしまうとなると、Checkpointが実写系になっている、LoRAが実写系のものになっている (or実写系で学習している？)、プロンプトに実写系で使うようなものが入っている、などが原因でしょうか？ CheckpointやLoRAを入れ替えて生成してみると原因がわかるかもしれません！

生成の仕組みをよく分かっていなかったようです…チェックポイントが実写になっていただけでした。ありがとうございました