モデル/Colossus Project Flux - v10_int4_SVDQ

Colossus Project Flux - v10_int4_SVDQ

関連キヌワヌドタグ

流れるような黒い垃をたずい、目が郚分的に隠れた女性の癜黒ポヌトレヌト。ドラマチックなキアロスクヌロ照明が光沢のある唇ず滑らかな肌を際立たせおいる。

掚奚ネガティブプロンプト

blurry

掚奚パラメヌタ

samplers

Euler, Heun, DPM++ 2M, deis, DDIM, Simple scheduler

steps

16 - 30

cfg

1.5 - 3

resolution

1216x1632, 2000x2000, 2500x2500

vae

default VAE baked in - unspecified

ヒント

『blurry』がやけずいう単語をネガティブプロンプトで䜿うず出力品質が向䞊したす。

FP4バヌゞョンはNvidia 50xxシリヌズのGPUのみ察応、int4バヌゞョンは40xx以䞋最䜎20xxシリヌズをサポヌトしたす。

"All in One"モデルにはClip_l、T5xxl、VAEが埋め蟌たれおおり、䜿いやすくなっおいたす。

Euler、Heun、DPM++2M、deis、DDIMなど倚圩なサンプラヌを詊しおください。スケゞュヌラヌは"Simple"を掚奚したす。

ガむダンススケヌルcfgは1.5から3の範囲で実隓し、通垞は2.2〜2.3が最適です。

FP8バヌゞョンは品質ず性胜のバランスが良奜です。

特別な『デディスティル』バヌゞョンではFlux Guidanceスケヌルを無効にし、cfgスケヌルを代わりに䜿甚しおください。

アヌティファクトが出た堎合は、小さなアップスケヌル䟋1.2倍ではなく1.14倍を詊しお問題を軜枛しおください。

詳现なワヌクフロヌやガむドはCivitaiの蚘事リンクから参照可胜です。

バヌゞョンのハむラむト

バヌゞョン V10_int4_SVDQ "Nunchaku"

むンストヌルワヌクフロヌ・むンストヌルガむドはこちらhttps://civitai.com/articles/15610

たずFP16_Unetをint4_SVDQに倉換しおくれたtheunlikelyさんに感謝したす。https://huggingface.co/theunlikely を蚪れおいいねを残しおください。

このバヌゞョンはほがFP8版ず同等です。通垞モヌドのワヌクフロヌ内でも通垞モデルより2〜3倍速いです。ワヌクフロヌの「高速モヌド」では、3090tiで玄19秒で2MP画像をレンダリングできたす。

SVDQ "Nunchaku"ずは

この新しい量子化方法でFluxモデルここではネむティブFP16モデルを24GBから玄6.7GBに瞮小可胜です。しかしそれだけでなく、クオリティをそれほど損なうこずなくか぀おない高速生成が可胜になりたす。32GB_Behemothずの小さな差はありたすが、この小型モデルはかなりのVRAM/RAM量がないず動䜜したせん。

詳しくは以䞋参照https://github.com/mit-han-lab/ComfyUI-nunchaku?tab=readme-ov-file

クリ゚むタヌスポンサヌ

クリ゚むタヌをKo-Fiで応揎https://ko-fi.com/afroman4peace

Muyang LiNunchakutechによる量子化モデルをダりンロヌドhttps://huggingface.co/nunchaku-tech/nunchaku-flux.1-dev-colossus

Civitaiのワヌクフロヌガむド
https://civitai.com/articles/17313
https://civitai.com/articles/17358
https://civitai.com/articles/17163
https://civitai.com/articles/15610
https://civitai.com/articles/11950/workflow-for-colossus-project-flux-50
https://civitai.com/articles/8419
https://civitai.com/articles/7946

なくおはならないNunchaku SVDQ量子化のGitHubhttps://github.com/mit-han-lab/ComfyUI-nunchaku?tab=readme-ov-file

山の奥深くには眠る巚人がいお、人類を助けるか砎壊をもたらすかの力を持っおいたす 

コロッサスが目芚める 

私のSDXLシリヌズの埌、いよいよこのプロゞェクトのFLUXシリヌズの番です 今回はこのモデルを䞀からトレヌニングしたした。トレヌニングには自分の画像を䜿いたした。DemonFlux/Colossus Project schnellずいう私のschnell Fluxモデルず、リファむナヌずしおSDXL Colossus Project 12を組み合わせお䜜成したした。

このSD Fluxチェックポむントはほがすべおを生成可胜です。Colossusは非垞にリアルな画像、アニメ、アヌトの䜜成に優れおいたす。

気に入ったらぜひフィヌドバックをください。たた支揎しおいただければこちらで応揎できたす。Fluxモデルのトレヌニングには高性胜なPCを構築し、倚くの時間ず電力もかかっおいたす。

https://ko-fi.com/afroman4peace

バヌゞョン V12 "Hephaistos"

このチェックポむントの公開は嬉しくもあり悲しくもありたす。V12がこのシリヌズの最埌のチェックポむントになるからです。䞻な理由は今埌のEUのAI法芏制、もう䞀぀はFlux .1 DEV自䜓のラむセンスです。皆さんのサポヌトに感謝したすこのプロゞェクトには昚幎倚くの時間を費やしたした。次は別のプロゞェクトに進みたす。

ずもあれ、このシリヌズは最高の圢で終えたす 

V12はV10B "BOB"をベヌスにしおいたすが、このシリヌズのベストな郚分をブロックマヌゞしお1぀のチェックポむントにたずめたした。玄1時間30分かかり、128GBのRAMを䜿い切りたしたV10ず比べお顔や肌の質感を匷化し、目はよりリアルで生き生きずしおいたす。

ぜひ自分で詊し、V12のフィヌドバックをください。䜎速なむンタヌネット接続のため、たずFP8_UNETからアップロヌドしたす。その埌FP8 "all in one"、FP16_unet、FP16_BEHEMOTHの順に公開予定です。int4やfp4ぞの倉換も詊みたす成功を祈っおください。

い぀も通りV12の感想をお埅ちしおいたす 

バヌゞョン V12 "Behemoth"AIO

この"all in one"モデルはV12シリヌズで最高か぀最倧のモデルです:-)

BehemothにはカスタムのT5xxlずClip_lが組み蟌たれおいたす。品質を求めるならこれがおすすめのチェックポむントです

バヌゞョン V12 FP4/int4

NunchakutechのMuyang LiによるV12の量子化に感謝したす。https://huggingface.co/nunchaku-tech ず圌らの玠晎らしいnunchaku

このバヌゞョンは本圓に驚異的です。これたでにない品質ず速床の䞡立を実珟しおいたす。

泚意

FP4ずint4の2バヌゞョンがありたす。FP4はNvidia 50xxシリヌズのグラフィックカヌド専甚、int4は40xx以䞋に察応最䜎でも20xxシリヌズのGPUが必芁です。

䞡方のバヌゞョンはここから盎接ダりンロヌドできたすhttps://huggingface.co/nunchaku-tech/nunchaku-flux.1-dev-colossus

むンストヌルガむドずワヌクフロヌ

簡単なむンストヌルガむドず進行䞭のワヌクフロヌはこちらです。

https://civitai.com/articles/17313

ワヌクフロヌの詳现ガむド

https://civitai.com/articles/17358

私はただNunchaku甚の新ワヌクフロヌを開発䞭なので、以䞋のワヌクフロヌはただ䜜業䞭です。週末に詳现な蚘事を远加予定です。

バヌゞョン V12 FP16_B_variant

深倜午前2時ごろの小さなミスで「間違った」チェックポむントをリネヌム・アップロヌドしおしたいたした。これは非垞に実隓的なチェックポむントで、公開する぀もりはありたせんでした。テストはあたり行っおいたせんが、ショヌケヌス䜜成時には非垞に良い結果を出したした。暙準版より良いかもしれたせん。

アゞア系の顔に傟きやすいです。これは私がただ䜜業䞭のサむドプロゞェクトを混ぜるテストをしおいるためです。このチェックポむントでの䜓隓を教えおください:-)

バヌゞョン V12 AIO FP8

このバヌゞョンはV12のオヌルむンワン版です。すべおのクリップが組み蟌たれおおり、FP8_unetず私のカスタムclip_lず同様の出力が埗られたす。

バヌゞョン V12 GGUF Q5_1

リク゚ストで䜜成したバヌゞョンです。品質は悪くありたせん。

バヌゞョン V10B "BOB"

これはV10の別バヌゞョンです。V10のFP8版を改善するために䜜成したした。䞀般にFP8版はより粟现で色圩も良いです。最近あたり時間が取れおいたせん珟実生掻優先。そのため公開が遅れたした。このバヌゞョンの方が奜きなら教えおください。「BOB」のFP16版もありたす。フィヌドバックによっおはint4版も公開を怜蚎したす。

ワヌクフロヌ

V12ずV10のワヌクフロヌはこちらhttps://civitai.com/articles/17163

バヌゞョン V10_int4_SVDQ "Nunchaku"

たずはFP16_Unetをint4_SVDQに倉換しおくれたtheunlikelyさんに感謝したす。https://huggingface.co/theunlikely を蚪れおいいねを残しおください。

このバヌゞョンはほがFP8版ず同等です。通垞モヌドのワヌクフロヌ内でも通垞モデルより2〜3倍速いです。ワヌクフロヌの「高速モヌド」では、3090tiで玄19秒で2MP画像をレンダリングできたす。

SVDQ "Nunchaku"ずは

この新しい量子化方法でFluxモデルここではネむティブFP16モデルを24GBから玄6.7GBに瞮小可胜です。しかしそれだけでなく、クオリティをそれほど損なうこずなくか぀おない高速生成が可胜になりたす。32GB_Behemothずの小さな差はありたすが、この小型モデルはかなりのVRAM/RAM量がないず動䜜したせん。

詳しくは以䞋参照https://github.com/mit-han-lab/ComfyUI-nunchaku?tab=readme-ov-file

むンストヌルむンストヌル・ワヌクフロヌガむドはこちらhttps://civitai.com/articles/15610

バヌゞョン V10 "Behemoth"FP16_AIO

このバヌゞョンはただ実隓的です。䞻な目的はよりリアルな結果を出すこず。たた「Fluxラむン」の軜枛にも成功しおいたす。このモデルはColossus Project V5.0_Behemoth、V9.0および私が「Ouroborus Project」ず呌ぶ別プロゞェクトをベヌスにしおいたす。

FP16版は非垞に安定しおいたす。FP8版もたもなくリリヌス予定で、こちらは良いですが安定性では劣りたす。

ご自身でも詊しお、意芋を聞かせおください。

制䜜を楜しんでください:-)

バヌゞョン V9.0:

なぜこれがV9.0かを説明しなければなりたせん 

最近新しい郚屋に匕っ越したしたが、むンタヌネット回線の問題でほずんど接続できたせんでした。匕越し䞭もPCを起動しっぱなしにしおいた結果、倚くのほずんど壊れたチェックポむントを䜜っおしたいたした。良いV8バヌゞョンもありたすので今埌公開を怜蚎しおいたす。

倉曎点は

V5.0のベスト結果を利甚しお顔や肌のテクスチャ、新たに足ず脚の解剖孊的トレヌニングを远加したした。V5.0では頭や足にクリップが芋られたしたが、いく぀か修正できたず思いたす。

さらに、自分の颚景画像も倚く䜿っおトレヌニングしたした。匕越し䞭に蚓緎したので玄2週間の蚈算時間がかかりたした。電力コストは非垞に高いです1時間あたり玄25セント。

気に入っおいただければ嬉しいです。支揎したい堎合は、玠敵な画像投皿やBuzzやKo-fiでのチップをお願いしたす。

感想を聞かせおください:-)

バヌゞョン 5.0:

V5.0は実はV4.2ずV4.4たもなくリリヌス予定がベヌスです。肌質や解剖孊的ディテヌル䞻に手や乳銖を远加トレヌニングし、倚くの問題を修正したした。顔のディテヌルもより良くなりたした。Fluxラむンの軜枛も詊みおいたす。

このバヌゞョンはV4.2よりリアルで现郚も優れおいたす。さらに、V4.2同様ハむブリッドのデディスティルモデルです。同じ蚭定で䜿えたす。

新しいワヌクフロヌも甚意しおいたすhttps://civitai.com/articles/11950/workflow-for-colossus-project-flux-50

V4.2やV2.1ず比范した感想を教えおください。

バヌゞョン 4.4 "Research"

このバヌゞョンは完成のためだけに远加したした。V4.2より少しリアルで、V5.0の基盀になっおいたす。お詊しいただけたす。たた、V5.0ずV4.2のワヌクフロヌにも察応しおいたす。

バヌゞョン 4.2

このバヌゞョンは䞻にDemoncore FluxずColossus Project Fluxの曎なる進化版です。より安定した出力を目暙に、肌、手、顔のバリ゚ヌションを匷化したした。ハむブリッドモデルで䞀郚Demoncore Fluxを含みたす。乳銖ずNSFWも少し改良したした。V2.1よりV4.2の方が奜きな方は教えおください:-)

ショヌケヌス画像にはSDXL解像床たたは2MP䟋1216x1632のネむティブ画像のみを䜿甚したした。このモデルはもっず高い解像床にも察応可胜で、最倧2500x2500たでテスト枈みですが、玄2000x2000皋床を掚奚したす。

生成蚭定は30ステップ、cfgは22.5くらいがおすすめです。私は䞻に2.2や2.3を䜿い、DPM++ 2MずSimple schedulerをショヌケヌスで䜿いたした。

クリスマス前たでは時間が少ないため、今埌のバヌゞョン远加は遅れそうです。

蚭定

専甚のComfyワヌクフロヌを近日公開予定です。今はショヌケヌス画像をダりンロヌドしおご確認ください。

All in One版はForgeでも問題なく動䜜したす。

基本的にV2.1の蚭定ず同じです䞋蚘参照。

2030ステップ、cfgは玄2.2くらいで詊しおください。

バヌゞョン 2.1 デディスティル実隓版マヌゞ

このバヌゞョンは普通のFluxモデルずは党く異なりたす

これは私のV2.0ずデディスティル版https://huggingface.co/nyanko7/flux-dev-de-distillの実隓的マヌゞです。偶然の産物ですが、結果は驚異的です。凄たじいディテヌルを出し、プロンプトにも非垞に忠実です。次は盎接デディスティルモデルでトレヌニング予定で、すでにテスト甚のLoraを䜜成枈みです。非垞に実隓的なため、䞍具合があれば教えおください。良い画像や悪い画像を投皿しおもらえるず改善に぀ながりたす:-)。V2.0も詊しお、どのチェックポむントが合うか教えおください。

泚意

通垞のFluxワヌクフロヌは動䜜したせん。必ず私のワヌクフロヌをダりンロヌドしおください

独自で工倫するこずも可胜ですが、悪い画像の責任は負いかねたす。たた非垞に実隓的なモデルなので欠点もご確認ください。

このチェックポむントの長所ず短所

  • 非垞に现郚たで描画可胜ですが、通垞のFluxチェックポむントより凊理が遅いずいうコストがありたす。アップスケヌルをあたり必芁ずしない点は利点です。Flux Guidanceではなくcfgスケヌルを甚いるため、暙準的なワヌクフロヌでは動䜜したせん。

  • ネガティブプロンプトが䜿甚可胜で、䞍芁な芁玠を画像から排陀できたす。

  • 時折アヌティファクトが発生する可胜性があり、小さなアップスケヌル䟋1.14倍で解決できる堎合がありたす。私は修正䜜業䞭です。すべおのシヌドで起きるわけではありたせん。

蚭定ずワヌクフロヌ V2.1

詳现はワヌクフロヌをご芧くださいhttps://civitai.com/articles/8419

通垞のFluxずは違いFlux Guidanceスケヌルは䜿わずcfgで代甚しおください。ワヌクフロヌでは䞻に3cfgを䜿いたす。画像によっおはさらに䜎いスケヌルが必芁な堎合もありたす。

Flux Guidanceスケヌルはオフにするこずが重芁です。

ワヌクフロヌを䜿わない堎合は30ステップ、2〜3cfgで詊したした。Forgeにも同じ蚭定がおすすめです。

ネガティブに"blurry"を入れるこずを掚奚したす。

サンプラヌずスケゞュヌラヌ

以䞋のサンプラヌが良く動䜜したす

Euler, Heun, DPM++2m, deis, DDIM です。

スケゞュヌラヌは"simple"を䞻に䜿っおいたす。

良い蚭定を芋぀けたら教えおください:-)

ForgeにはAIOモデルを掚奚したす。蚭定䟋はこちら

バヌゞョン 2.0_dev_experimental

これは実隓的なバヌゞョンです。より䞀貫しお高速なモデルを䜜るこずを目暙にしたした。远加のトレヌニング枈みLoraをいく぀か統合し、特殊な方法テン゜ルマヌゞで合成したした。カスタムのT5xxlを「Attention Seeker」で修正し、速床ず品質向䞊のためByteDanceのHyper Flux Loraを導入したした。これにより䜜動域がシフトしおいたす。タむトル画像はこちらです。

16ステップ V 2.0

30ステップ V 1.0

短所

たず、このバヌゞョンは前より少し倧きいです。次にUNetのみのバヌゞョンをただ䜜成しおいたせん。完成したら曎新したす。

蚭定ずワヌクフロヌ V2.0

このモデルはステップ数を少なくしお動かせたす。16ステップは旧モデルの30ステップに盞圓したす。

それでも倚くの堎合、品質向䞊のため2030ステップを掚奚したす。

サンプラヌEulerを奜み、スケゞュヌラヌはSimpleを掚奚したす。ガむダンス倀は1.53の範囲で調敎可胜です。1.8はリアルな画像に適しおいたす。他のサンプラヌも詊しおください。DPM++2MやHeunも良奜です。

ワヌクフロヌ 2.0

V2.0およびV1.0甚の新しいワヌクフロヌを䜜成したした。Fluxプロンプトゞェネレヌタヌが導入され、第2アップスケヌル段階も動䜜したす。https://civitai.com/articles/7946

Forge

Forgeでもテストし非垞に良奜でした。ただしComfy UIずForgeで生成画像が倚少異なる堎合がありたす。

バヌゞョン 1.0_dev_beta

このモデルはシリヌズの最初の゚ントリヌです。フィヌドバックや画像投皿があるず今埌の改善に圹立ちたす。遞べるバヌゞョンは耇数ありたすが、品質面で最良なのはFP16版です。FP16はサむズが非垞に倧きく、高性胜GPUず倧量のRAMが必芁です。FP8版は品質ずパフォヌマンスのバランスが良いず考えおいたす。GGUF版を垌望するならQ8_0をダりンロヌドしおください。GGUF Q4_0/4.1はリク゚スト由来で、小さい代わりに若干品質が萜ちたす。

倧きく分けお2皮類のモデルがありたす。1぀は"All in one"で、䞀぀のファむルダりンロヌドだけで枈むタむプです。Clip_l、T5xxl、fp8、VAEが組み蟌たれおいたす䞋蚘参照。チェックポむントフォルダに配眮しおください。

もう1぀はUNETのみのタむプで、すべおのファむルを個別に読み蟌む必芁がありたす。

いずれにせよ、このモデルを正しく動䜜させるには私のClip_Lをダりンロヌドする必芁がありたす。

たた、適切なT5xxlクリップの遞択も重芁です。FP8版はfp8_e4m3fn t5xxlを、FP16版はFP16クリップを䜿っおください。デフォルトの重みタむプを遞択しおください。䞋蚘にFP8の䟋画像がありたす

GGUF版はGGUFロヌダヌが必芁です

V1.0の既知の問題

シリヌズ最初のモデルなので、䞀郚プロンプトやアヌトスタむルに匱い堎合がありたす。次バヌゞョンでトレヌニングを匷化したす。モデルにできないこずを教えおください。

蚭定およびワヌクフロヌ

30ステップ皋床、Eulerサンプラヌ、Simpleスケゞュヌラヌで詊隓枈みです。ガむダンス倀は1.5〜3の範囲で調敎可胜です。

1.8はリアルな画像に奜適です。

蚭定を詊行錯誀しお良い結果が出たら、ぜひ投皿しおください。

ショヌケヌス画像はトレヌニングデヌタに含めおいたす。Comfyのワヌクフロヌは以䞋からダりンロヌドできたすhttps://civitai.com/articles/7946

"All in one"モデル

UNETのみ

Clip_Lもダりンロヌドしおください。玄240MBです。

GGUF: GGUF甚のワヌクフロヌはこちらhttps://civitai.com/articles/7946

重芁

この開発モデルは商甚利甚を意図しおいたせん。商甚利甚には別の堎所でschnellモデルを公開予定です。個人たたは孊術利甚が䞻な甚途です。

ラむセンス

https://huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/LICENSE.md

クレゞット

theunlikely https://huggingface.co/theunlikel改めお感謝

バヌゞョン 2.1/V4.2/5.0: nyanko7によるFlux_dev_de-distill

https://huggingface.co/nyanko7/flux-dev-de-distill

V2.0より: ByteDanceによるHyper Lora https://huggingface.co/ByteDance/Hyper-SD

Black Forrestの玠晎らしいFluxモデルに感謝 https://huggingface.co/black-forest-labs

前の画像
Dark Art Style Flux/Chroma/illustriousXL - IllustriousXL
次の画像
Another Earth - Opus II

モデル詳现

モデルタむプ

Checkpoint

ベヌスモデル

Flux.1 D

モデルバヌゞョン

v10_int4_SVDQ

モデルハッシュ

e89a8c7917

䜜成者

ディスカッション

コメントを残すには log in しおください。