🌈🦄の使い方をお読みください

Pony FaeTality は自然な2.5Dルックを持ちながら、スタイルLoRAを使わずに多くのスタイルができる多用途なPonyモデルです。🥰

バージョン1.1アップデート（Chat GPTキャプション付き）

ライティングの改善に注力した小さなアップデートを行いました。GPT-4でキャプション付けされた120枚の画像でLoRAをトレーニングし、GPTのキャプション能力をテストしました。ライティングの改善は劇的ではありませんが、わずかな向上があります。時間があれば（😿）もっと大きなデータセットで再度実験し、有意な結果を目指します。🦄

効果を出すためにこのような説明が役立ちます： 明るい色、高コントラスト、暗い背景、鮮やかなライティング

GPT-4データセットの画像例と与えられたキャプション

ハート型のキャンドル、鮮やかに溶けるロウ、動的な飛沫、キャンドルの炎、明るい色、高コントラスト、暗い背景、鮮やかなライティング、お祝い、ロマンス、抽象、愛のコンセプト、輝く効果、キラキラした粒子、多色の滴、ロウの流れ、照らされた、アート的、クリエイティブな写真、エネルギー、動いて溶ける、高解像度、中心的装飾、祭りのムード

ヒント＆コツ

• 常に score_9, score_8_up, score_7_up, score_6_up, score_5_up, score_4_up を使用してください

• Clip Skip 2 を使用してください

• このモデルはblipとWDのキャプションとタグでトレーニングされています。プロンプトでdanbooruタグを活用してください。

• 特定のキーワードは出力に大きな影響を与えます。例： リアリスティック、そばかす、大きな唇、美しい瞳

• プロンプトは少なめにするのが良いです。多くの説明を追加しすぎないでください

• ネガティブは控えめに。ネガティブに入れる '3D' は効果が大きく、トレーニングされたスタイルを抑えたい時に有効です。使う場合はターゲットを絞ったものにしてください。

• Ponyベースのため、データ選択タグとして 'source_pony', 'source_furry', 'source_cartoon', 'source_anime' と評価タグ 'rating_safe', 'rating_questionable', 'rating_explicit' を利用可能です。

• 推奨アスペクト比は 1024x1024, 832x1216, 1216x832 です

得意なこと

• 2.5Dの人物、動物、ファーリー

• 多くの場合、自然に美しいディテールや背景を加えます

• NSFW

• かわいいもの

苦手なこと

• NSFWでない複雑なシーンやオブジェクト

• たまに首がキリンのようになるので、ネガティブに 'long neck' を入れることで修正可能です。🦒

• フォトリアリズム

• 時々ランダムなものを動物にしたがります 🤷‍♀️

制作過程

1ヶ月以上前にFaetastic SDXLを2.5Dスタイルにファインチューニングしようと始めました。データセットは全て生成画像で構成されています。95%は私が作成した、FaeTasticSDXLで素晴らしい2.5Dルックを出せるプロンプトスタイルの生成画像で、いつもそのスタイルを保つチェックポイントを目指しました。

データセットの中の1枚の画像です

ファインチューンは成功し素晴らしいものでしたが、NSFWに強くしたいと考え、なかなか難しくて面白い結果も生みました。

この頃Ponyが非常に人気になり、私はCivitaiで忙しかったためショートカットとしてPonyをベースモデルに切り替え目標達成を目指しました。

それでファインチューンし、4つのLoRAをトレーニングし組み込みました。LoRAはスタイルをさらに明確にし、FaeTastic Detailsデータセットも加え、細かくてかわいい雰囲気を出しています。

今後改善を試みること（できる時に 😅）

• より良い暗さ／影の表現

• 奇妙な部分を無くす

• 「普通の物」のより良い理解