ローカル環境を作ったときに使ってみたかった機能にCharTurnerLoRA（同一キャラを複数視点で出力するLoRA）があったので早速使ってみたものの、出力が安定していなかったのでControlNetを併用する方法を考えてみた。 さらにランダム要素を加えてキャラクター ...

2月10日に、人物のポーズを指定してAIイラストの生成ができるControlNetの論文が発表され、すぐにStable Diffusion用のモデルがGitHubで公開されて、ネットで話題になっています。 今回、このControlNetをWebUIに導入して使用する方法を紹介します。 (2023/03/09追記）WD 1. ...

Turboはsteps 9、CFG ...

1962年生まれ。プログラマー、IT系ライター、カメラマン(主にグラビア)と、三足の草鞋になってもう四半世紀。 ComfyUI使って ...

Stable Diffusionなどの事前学習済みモデルに対して、輪郭線や深度、画像の領域区分(セグメンテーション)情報などを追加して出力をサポートする技術が「ControlNet」です。このControlNetを使うことで、別途に読み込ませた画像に写っている線画や人の姿勢などを ...

こんにちは。この連載では、AI生成技術と進化、3DCG制作現場への活用の可能性を探索していきます。今回取り上げるのは、オープンソースの画像生成AI StableDiffusionとControlNet、3Dレンダラの連携についてです。 AI関連の研究は日々驚くほどのスピードで進化し ...

“棒人間”姿のVRアバターで取ったポーズを基に、画像生成AIで出力する美少女イラストの姿勢を指定する――こんなチャレンジをした人がいる。生成するキャラクターのポーズを制御できる技術を活用したもので、VR空間でアバターを動かせばいいので ...

近年はテキストから音楽を生成するAIツールが進歩を遂げ、さまざまなスタイルで高品質の音楽を生成できるようになっていますが、従来のテキストによる生成ではビートの位置や音楽のダイナミクス(強弱)など、時間と共に変化する属性を制御するのが ...

The WebUI extension for ControlNet and other injection-based SD controls. This extension is for AUTOMATIC1111's Stable Diffusion web UI, allows the Web UI to add ControlNet to the original Stable ...

英Stability AIは11月26日（現地時間）、「Stable Diffusion 3.5 Large」の新たな3つのControlNet、「Blur」「Canny」「Depth」を発表した。「Stability AI Community License」のもと、商用（年間総収益が100万ドル未満の組織に限る）・非商用問わず、無料で利用できる。

Official implementation of Adding Conditional Control to Text-to-Image Diffusion Models. ControlNet is a neural network structure to control diffusion models by adding extra conditions. It copys the ...