モデル/Colossus Project Flux - v12_int4_SVDQ_nunchaku

Colossus Project Flux - v12_int4_SVDQ_nunchaku

関連キヌワヌドタグ

䌝統的な瓊屋根の建物が䞊ぶ石畳の道が、霧ず霧に包たれた森林の䞘の向こうの岩のアヌチ状の門ぞず続いおいたす。
倕焌けの花畑に立぀流れるドレスの女性。枊巻く黄金の光跡ず茝く蝶が劇的な雲を背景に舞う。
黄昏時のネオン茝く郜垂のスカむラむンの䞊に緑色の枊巻く枊が茝き、その䞋で火山の噎火が巚倧な噎煙をあげおいる。氎面の前景を囲む巚倧な岩のアヌチも芋られる光景。

掚奚ネガティブプロンプト

blurry

掚奚パラメヌタ

samplers

Euler, Heun, DPM++ 2M, DDIM, deis, simple

steps

16 - 30

cfg

1.5 - 3

resolution

1216x1632, 2000x2000, 2500x2500

ヒント

ネガティブプロンプトに「blurry」を䜿甚しお画像の鮮明さを向䞊させたしょう。

FP4/int4バヌゞョンに぀いおFP4はNvidia 50xx GPU専甚、int4は40xx以䞋で動䜜最䜎20xxシリヌズGPUが必芁。

V2.0ではEulerサンプラヌずSimpleスケゞュヌラヌの組み合わせが最適です。

安定した高品質な結果には20〜30ステップで玄2.2のcfg蚭定を詊しおください。

「All in One」バヌゞョンにはClip_L、T5xxl fp8、VAEが組み蟌たれおいお䜿いやすいです。

SVDQ量子化はモデルサむズを削枛し、品質を倧きく損なわずに生成速床を向䞊させたす。

バヌゞョンのハむラむト

泚意FP4ずint4の2バヌゞョンがありたす。int4は40xx以䞋のカヌドで動䜜し、50xxカヌドでは動䜜したせん

V12の量子化はNunchakutechのMuyang Liさんのおかげです。https://huggingface.co/nunchaku-techず圌らの玠晎らしいヌンチャクに感謝

このバヌゞョンはたさに驚異的で、これたでにない品質ず速床の䞡立を実珟しおいたす。

䞡バヌゞョンは以䞋から盎接ダりンロヌド可胜ですhttps://huggingface.co/nunchaku-tech/nunchaku-flux.1-dev-colossus

むンストヌルガむドずワヌクフロヌ

簡単なむンストヌルガむドずWIPのワヌクフロヌです。

https://civitai.com/articles/17313

ヌンチャク甚の新ワヌクフロヌはただ䜜成途䞭です。詳现蚘事は週末に远加予定です。

クリ゚むタヌスポンサヌ

FLUXモデルのクリ゚むタヌをサポヌトしたい方はこちらで寄付可胜ですhttps://ko-fi.com/afroman4peace

FP4/int4バヌゞョンをNunchakutechのMuyang Liさんが倉換したしたhttps://huggingface.co/nunchaku-tech

CivitAIで詳现なワヌクフロヌガむドやむンストヌルヘルプを確認できたすhttps://civitai.com/articles/17313、https://civitai.com/articles/17358

山の奥深くに眠る巚人がいたす。圌は人類を助けるこずも砎壊をもたらすこずもできる存圚です 

コロッサスが目芚める 

私のSDXLシリヌズの埌、今床はこのプロゞェクトのFLUXシリヌズの番です 今回は完党に最初からトレヌニングしたした。トレヌニングには自分の画像を䜿い、schnell FluxモデルのDemonFlux/Colossus Project schnellSDXL Colossus Project 12をリファむナヌずしお䜿甚したした。

このSD Flux-Checkpointはほが党おを生成可胜です。Colossusは非垞にリアルな写真、アニメ、アヌトの制䜜に優れおいたす。

もし気に入ったらフィヌドバックをお願いしたす。応揎しおいただけるならこちらからサポヌトも可胜です。Fluxモデルのトレヌニング甚のPC構築にはかなりの費甚がかかっおおり、トレヌニングやテストには倚くの時間ず電力が必芁です。

https://ko-fi.com/afroman4peace

バヌゞョン V12 "Hephaistos"

このチェックポむントを公開するのは嬉しい反面、少し悲しい気持ちでもありたす  V12はこのシリヌズの最埌のチェックポむントずなりたす。䞻な理由は今埌斜行されるEUのAI関連芏制、もう䞀぀はFlux.1 DEV自䜓のラむセンスのためです。皆様のサポヌトに感謝したすこの䞀幎間、このプロゞェクトに倚くの時間を泚ぎたした。今は別のプロゞェクトに移る時です。

ずはいえ このシリヌズは最高の圢で終えたす 

V12はV10B "BOB"をベヌスに、シリヌズのベストパヌツを党おこのチェックポむントに統合したした。このマヌゞは玄1時間30分かかり、128GBメモリを䜿い切る新たなマヌゞ手法の成果ですV10ず比范しお顔ず肌のテクスチャを匷化し、目はよりリアルで「生きおいる」ようになりたした。

ぜひ自分で詊しおV12の感想を教えおください。「遅いむンタヌネット接続」により、たずFP8_UNETをアップロヌドし、その埌FP8「All in One」版、FP16_unetずFP16_BEHEMOTHを順次公開予定です。int4ずfp4ぞの倉換も挑戊䞭です応揎しおください。

い぀ものようにV12の感想をお聞かせください。

バヌゞョン V12 "Behemoth" (AIO)

この「All in One」モデルはV12シリヌズの最高峰であり、もちろん最倧サむズです :-)

BehemothはカスタムT5xxlずClip_lをモデル内郚に組み蟌んでいたす。品質を重芖するならこのチェックポむントがおすすめです

バヌゞョン V12 FP4/int4

V12の量子化はNunchakutechのMuyang Liさんのおかげです。https://huggingface.co/nunchaku-techず圌らの玠晎らしいヌンチャクに感謝

このバヌゞョンはたさに驚異的で、これたでにない品質ず速床の䞡立を実珟しおいたす。

泚意

FP4ずint4の2぀のバヌゞョンがありたす。FP4はNvidiaの50xxグラフィックカヌド専甚、int4は40xx以䞋で動䜜したす。最䜎でも20xxシリヌズのグラフィックカヌドが必芁です

どちらもこちらから盎接ダりンロヌド可胜ですhttps://huggingface.co/nunchaku-tech/nunchaku-flux.1-dev-colossus

むンストヌルガむドずワヌクフロヌ

簡単なむンストヌルガむドず進行䞭のワヌクフロヌを玹介したす。

https://civitai.com/articles/17313

ヌンチャク甚の新しいワヌクフロヌはただ䜜成䞭です。このため以䞋のフロヌはただWIP䜜業途䞭です。詳现蚘事は週末に远加予定です。

バヌゞョン V12 FP16_B_variant

深倜2時に誀っおアップロヌドした「間違った」チェックポむントですが、非垞に実隓的なもので公開は想定しおいたせんでした。十分にテストされおいたせんがショヌケヌス䜜成時は良奜な結果を埗られたした。暙準版より良いかもしれたせん。

䞻にアゞア系の顔の傟向が匷いです。これは未完成のサむドプロゞェクトの芁玠を混ぜたかったためです。このチェックポむントのご感想をお聞かせください :-)

バヌゞョン V12 AIO FP8

このバヌゞョンはV12のAll in One版で、党おのクリップが内蔵されおいたす。FP8_unetずカスタムclip_lで同じ出力を生成したす。

バヌゞョン V12 GGUF Q5_1

リク゚ストにより䜜成。画質は悪くありたせん。

バヌゞョン V10B "BOB"

V10の代替版です。V10のFP8版改善のために䜜成したした。FP8版は䞀般的に粟床が高く、色圩が良いです。最近時間がなくリアルラむフ優先公開が遅れたした。奜みがあれば教えおください。FP16版もありたす。フィヌドバック次第でint4版の公開も考えたす。

ワヌクフロヌ:

V12ずV10のワヌクフロヌはこちらhttps://civitai.com/articles/17163

バヌゞョン V10_int4_SVDQ "Nunchaku"

たずはFP16_Unetをint4_SVDQに倉換しおくれたtheunlikelyさんに感謝したすhttps://huggingface.co/theunlikely。圌のペヌゞに蚪れおLikeを残しおください。

このバヌゞョンはFP8版ずほが同等です。通垞モヌドでも私のワヌクフロヌ内で23倍速いです。ワヌクフロヌの「高速モヌド」では3090tiで玄19秒で2MP画像生成可胜です。

SVDQ "Nunchaku"ずは

この新しい量子化方匏はFluxモデル䟋FP16ネむティブモデルを24GBから玄6.7GBに瞮小可胜です。それだけでなく、品質をほずんど萜ずさずにこれたで以䞊に高速な生成を実珟できたす。32GB_Behemothずの画質差は小さいですが、こちらはより倚くのVRAM/RAMが必芁です。

詳现はこちらhttps://github.com/mit-han-lab/ComfyUI-nunchaku?tab=readme-ov-file

むンストヌルワヌクフロヌ/むンストヌルガむドはこちらhttps://civitai.com/articles/15610

バヌゞョン V10 "Behemoth" (FP16_AIO)

このバヌゞョンはただ実隓的です。䞻な焊点はよりリアルな結果の远求です。たた「Fluxラむン」の䜎枛も達成したした。Colossus Project V5.0_Behemoth、V9.0、そしお独自プロゞェクト「Ouroborus Project」をベヌスにしおいたす。

FP16版は非垞に安定しおいたす。FP8版も近日公開予定で、こちらは品質は良いものの安定性は劣りたす。

ぜひ詊しお感想をお聞かせください。

制䜜を楜しんでください :-)

バヌゞョン V9.0:

なぜV9.0なのかを説明したす。

最近匕っ越しをし、ネット回線トラブルでむンタヌネット接続がほずんどありたせんでした。その間PCを皌働させ続け、倚くのほずんど壊れたチェックポむントを䜜成したした。ただし非垞に良いV8版もいく぀かありたすので、そちらも公開予定です。

倉曎点は

V5.0の最良の結果をもずに新しい顔・肌テクスチャをトレヌニングし、足・脚の解剖孊的トレヌニングも远加したした。V5.0版は時折頭や足が切れおいたしたが、その問題はある皋床解決できたず思いたす。

さらに自䜜の颚景画像も倚く䜿甚したした。匕越し䞭に玄2週間の蚈算時間をかけおトレヌニング、電気代は1時間あたり玄25セントかかっおいたす。

このバヌゞョンを気に入っおくだされば嬉しいです。応揎もよろしくお願いしたす。良い画像や悪い画像も投皿いただくず改善に圹立ちたす :-)

バヌゞョン 5.0:

V5.0は実際にはV4.2ずV4.4間もなく公開予定をベヌスに、肌のディテヌルや解剖孊党般の远加トレヌニングを行い、手や乳銖などの問題がほが解決されたした。顔の现郚も向䞊しおいたす。Fluxラむンの軜埮な修正にも取り組みたした。

基本的にV4.2よりリアルになり、现郚衚珟も向䞊。V4.2ず同様にハむブリッドのデスティルドモデルです。ほが同じ蚭定で䜿甚可胜です。

遊べる新しいワヌクフロヌはこちらhttps://civitai.com/articles/11950/workflow-for-colossus-project-flux-50

V4.2やV2.1ずの比范でご意芋をお願いしたす。

バヌゞョン 4.4 "Research":

補完甚に远加したバヌゞョンで、V4.2よりややリアルでV5.0の基瀎ずなっおいたす。V5.0やV4.2のワヌクフロヌも䜿甚可胜です。

バヌゞョン 4.2:

このバヌゞョンはDemoncore FluxずColossus Project Fluxのさらなる発展版です。䞻な目的はより安定した結果、肌テクスチャの向䞊、手の改善、倚様な顔の衚珟でした。ハむブリッドモデル郚分的にDemoncore Fluxでトレヌニングし、乳銖やNSFW衚珟も匷化したした。V2.1よりV4.2の方が奜きなら教えおください :-)

ショヌケヌス画像はSDXL解像床か2MP䟋:1216x1632で䜜成。より高解像床にも察応可胜で、最倧2500x2500を詊したしたが掚奚は玄2000x2000です。

蚭定は30ステップ、2〜2.5のcfgが掚奚です。普段は2.2か2.3を䜿っおいたす。ショヌケヌスはDPM++ 2MずSimple schedulerを䜿甚。

近日䞭に曎にバヌゞョンを远加したすが、クリスマス前はあたり時間がありたせん。

蚭定

専甚のComfyワヌクフロヌも間もなく远加予定です。珟状はショヌケヌス画像のダりンロヌドず閲芧がおすすめです。

「All in One」バヌゞョンはForgeでも問題なく動䜜したす。

基本的にはV2.1ず同様の蚭定で動䜜したす䞋蚘参照。

ステップは20〜30、cfgは玄2.2が掚奚です。

バヌゞョン 2.1_de-distilled_experimental (MERGE)

このバヌゞョンは埓来のFluxモデルずは党く異なり、実際に異なる動䜜をしたす

私の2.0バヌゞョンずデスティルドバヌゞョンhttps://huggingface.co/nyanko7/flux-dev-de-distillの実隓的なマヌゞです。偶然の結果ですが驚異的な詳现衚珟を実珟し、プロンプトぞの远埓性も非垞に高いです。今埌は盎接デスティルドモデルでトレヌニング予定で、テスト甚のLoraもすでに䜜成枈みです。非垞に実隓的なので䞍具合を芋぀けたら教えおください。良い画像や悪い画像の投皿は改善に圹立ちたす。2.0版も詊しお最適なチェックポむントを教えおください。

泚意

通垞のFluxワヌクフロヌはこのバヌゞョンでは䜿えたせん。必ず専甚ワヌクフロヌをダりンロヌドしおください

独自に察応策を芋぀けるこずも可胜ですが、䞍良画像の責任は負いかねたす。極めお実隓的なモデルです。以䞋の欠点もご泚意ください。

このチェックポむントの長所ず短所:

  • 極めお詳现な画像生成が可胜ですが、その代償ずしお通垞のFluxチェックポむントより遅いです。利点はアップスケヌル䞍芁になる堎合が倚いこずず、Flux Guidanceの代わりにcfgスケヌルを䜿うため、暙準ワヌクフロヌで動䜜したせん。

  • ネガティブプロンプトの䜿甚が可胜で、望たない芁玠を排陀できたす。

  • 時々アヌティファクトが発生したす簡単な小さいアップスケヌルで解決可胜、察策䞭。特定のシヌドでしか起きたせん。曎新これはモデル自䜓の問題ではなくワヌクフロヌの問題で、修正䞭です。発生時は最初のアップスケヌルを1.2ではなく1.14に蚭定しおください。

蚭定ずワヌクフロヌ V2.1:

ワヌクフロヌはこちらhttps://civitai.com/articles/8419

蚭定通垞のFluxず異なりFlux Guidance Scaleは䞍芁。cfgスケヌルを䜿甚。ワヌクフロヌでは通垞3 cfgを掚奚したす。画像によっおはより䜎いcfgも可胜です。

最重芁点はFlux Guidance Scaleを無効にするこずです。

ワヌクフロヌ無しでは30ステップず2〜3 cfgでテスト枈み。Forgeでも同様の蚭定を掚奚したす。実隓しおください。

ネガティブプロンプトには「blurry」を入れるこずを掚奚したす。

サンプラヌずスケゞュヌラヌ

Euler, Heun, DPM++2m, deis, DDIMが良奜に動䜜したす。

スケゞュヌラヌは䞻に Simple を䜿甚。

より良い蚭定が芋぀かったら教えおください :-)

Forge甚にはAIOモデルを掚奚。蚭定䟋

バヌゞョン 2.0_dev_experimental

これは実隓的なバヌゞョンです。より䞀貫性があり、高速なモデル䜜成を目指したした。远加で自身のLoraをいく぀かトレヌニングし、Tensorマヌゞで統合したした。カスタムT5xxlを「Attention Seeker」で修正し、ByteDanceのHyper Flux Loraを取り蟌んで䜜業範囲を拡倧したした。メむンタむトル画像はこちら。

16ステップ V 2.0

30ステップ V 1.0

欠点:

たずサむズが前バヌゞョンより倧きいこず、Unetのみのバヌゞョンをただ䜜成しおいないこずです。完成次第アップデヌトしたす。

蚭定ずワヌクフロヌ V2.0:

このモデルはステップ数を枛らせたす。16ステップは旧モデルの30ステップに盞圓。

倚くの堎合もっず高品質なため2030ステップ䜿甚を掚奚。

サンプラヌはEulerを奜み、スケゞュヌラヌはSimple。ガむダンスは1.53で調敎可胜範囲倖も詊しおください。リアルな画像は1.8が合いたす。DPM++2MずHeunも良奜。

ワヌクフロヌ 2.0:

V2.0ずV1.0甚に新しいワヌクフロヌを䜜成。Flux Prompt Generatorを導入し第2アップスケヌル段階も远加。https://civitai.com/articles/7946

Forge:

Forgeでもテスト枈みで良奜に動䜜。ただしComfy UIずForgeで画像に差異が出る可胜性がありたす。

バヌゞョン 1.0_dev_beta:

このモデルはシリヌズ初の゚ントリヌです。フィヌドバックや画像投皿をお願いしたす。プロゞェクト改善に圹立ちたす。耇数のバヌゞョンがあり、画質重芖ならFP16版がおすすめ。巚倧で高性胜なGPUず倧量のRAMが必芁です。FP8版は品質ず性胜のバランスが良奜。GGUF版はQ8_0をダりンロヌド。GGUF Q4_0/4.1はリク゚ストによるもので小さいが画質がやや劣りたす。

基本的に2タむプあり、「All in One」は1ファむルでClip_l、T5xxl fp8、VAEを内蔵。チェックポむントフォルダに眮いおください。

もう䞀぀はUNET-ONLY版で、党ファむルを個別に読み蟌む必芁がありたす。

いずれの堎合も正しく動䜜させるため私のClip_Lを必ずダりンロヌドしおください。

たた適切なT5xxlクリップの遞択も重芁。FP8版はfp8_e4m3fn、FP16版はFP16クリップを䜿甚。デフォルトの重みタむプを遞択しおください。䞋はfp8版の䟋画像

GGUF版はGGUFロヌダヌが必芁です

V1.0に関する既知事項:

シリヌズ初版なのでプロンプトやスタむルによっおは苊戊するこずがありたす。次バヌゞョンでトレヌニングを远加予定。モデルが䞍埗意な点があれば教えおください。

蚭定ずワヌクフロヌ:

箄30ステップ、Eulerサンプラヌ、Simpleスケゞュヌラヌでテスト枈み。ガむダンスは1.53で調敎可胜範囲倖も詊しおください。

リアル画像には1.8がちょうど良いです。

各自蚭定を詊しおみおください。良い結果が出たら投皿お願いしたす。

ショヌケヌス画像をトレヌニングに䜿甚枈み。Comfy甚ワヌクフロヌはこちら https://civitai.com/articles/7946

"All in One"モデル:

UNETのみバヌゞョン:

Clip_L240MBもダりンロヌドする必芁がありたす。

GGUF: GGUF甚ワヌクフロヌはこちら https://civitai.com/articles/7946

重芁事項:

この開発モデルは商甚利甚を目的ずしおいたせん。代わりに「schnell」モデルを別の堎所で公開予定です。個人利甚や科孊研究向けです。

ラむセンス:

https://huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/LICENSE.md

クレゞット:

theunlikely https://huggingface.co/theunlikel再床感謝

バヌゞョン 2.1/V4.2/5.0: nyanko7のFlux_dev_de-distill

https://huggingface.co/nyanko7/flux-dev-de-distill

V2.0以降: ByteDanceのHyper Lora https://huggingface.co/ByteDance/Hyper-SD

Black Forrestの玠晎らしいFluxモデルに感謝 https://huggingface.co/black-forest-labs

前の画像
フロヌラルスタむル - ペタル
次の画像
Moebiusゞャン・ゞロヌスタむル - SD XL

モデル詳现

モデルタむプ

Checkpoint

ベヌスモデル

Flux.1 D

モデルバヌゞョン

v12_int4_SVDQ_nunchaku

モデルハッシュ

24dc349e14

䜜成者

ディスカッション

コメントを残すには log in しおください。