スタイルチューナー高度な使用ガイド

スタイルチューナー高度な使用ガイド

2024/01/16



niji を立ち上げた当初は、expressive、cute、scenic、original という4つのオーダーメイドスタイルを作りました。niji を立ち上げてから1年ほど経った頃、誰もが自分だけのユニークなスタイルを調整できる新機能をリリースしました。

まだスタイルチューナーを試したことがない方は、ぜひ試してみてください!パーソナライズされたスタイルは、公式の niji スタイルと同じように使うことができます:単に–styleと入力し、その後にスタイルコードを入力します。

スタイル チューナーの使用方法の詳細については 🍸 パーソナライズされた Niji スタイル! を参照してください。

この開発ログは私の美学に支配されているので、今回は niji チームの他のメンバーに独自のスタイルを提供するよう依頼しました。

新鮮なスタイルを2つご紹介します: 以下の手順でお試しください。

名称

Decorated Paintings:装飾絵画

作成者

kumany

使い方

frame in frame,( ここに枠内に入れたいもののプロンプトを入力してください!) --niji --style 4ag0uYw5TU1WOaTn

説明

( ) 内に枠に入れたいプロンプトを入力すると、枠内に表示される場合があります。 ただし、気まぐれなスタイルなので、枠からはみ出したり、必ずしも期待どおりに機能しない可能性があります。

名称

Sakura dreams

作成者

nknk

使い方

ここに希望のプロンプトを入れてください! --niji --style 3UjsiHGyLHc6

説明

そのスタイルは可愛いのでみんなに使ってもらいたいです。

スタイルを使うのは比較的簡単ですが、スタイルを作成するのは困難です。 スタイル診断を星占いに例える人がいると聞いたことがあります。 実際には、それほど神秘的なものではありません!

秘訣は、いくつかの規律あるルールに従うことです。

ショッキングなことかもしれませんが、スタイルをうまく見せる最も簡単な方法は、自分が求めているスタイルを知ることです。 何か「奇妙な」ものを手に入れようとしている人たちに対しても、私がお勧めするのは、具体的なものから始めて、奇妙でユニークなものになるまで調整を加えていくことです。

アートはアーティストの心の中で始まり、最終的には見る人の心の中で終わるということを忘れないでください。 自分が何を望んでいるかを知ることが鍵であり、スタイルをよく理解することが、それを他者に伝える最良の方法です。

この例では、5歳児がクレヨンで描くようなスタイルを作成します。 これは作成するのが比較的難しいスタイルです。niji の自然な傾向は、描画をデジタルで整ったものにすることです。 ここでは、niji スタイルチューナーの限界に挑戦するため、あえてデフォルメされた伝統的なスタイルを試みています。

💡

自分のスタイルを定義する条件を明確にリストアップする

クレヨン スタイルのルールは次のとおりです:

デジタルではなく伝統的なものです。

子供の落書きのように下手に描かれている必要があります。優れたクレヨンアートを求めているわけではありません。

人物や建物にも適用できるものでなければなりません。 他の部分の描画が悪くても大丈夫です。

視覚的には、一貫して次のようなものが必要です:

5 year old child's drawing

明確に焦点を合わせて、始めましょう。

巨大なプロンプトでチューニングしようとしている人をよく見かけます。例えば

5 year old child crayon drawing, found art, charcoal, chiaoscuro, crayons, traditional art, white paper, scribbles, ukiyo-e, minimalist, brutalist, blink and you miss it detail, dutch angle, a spooky house 5歳児のクレヨン画、ファウンド・アート、木炭、キアオスクーロ、クレヨン、伝統芸術、白い紙、走り書き、浮世絵、ミニマリスト、ブルータリスト、まばたきすると見逃すディテール、ダッチ・アングル、不気味な家

/tune 5 year old child crayon drawing, found art, charcoal, chiaoscuro, crayons, traditional art, white paper, scribbles, ukiyo-e, minimalist, brutalist, blink and you miss it detail, dutch angle, a spooky house

ひとつには、スタイルとして意図した言葉が、主題として偶然そこに飛び込んでくるのが見えるからです。5歳児の絵ではなく、5歳児が描いたような雑な絵が欲しいのです。

💡

スタイルを調整するときは、スタイルの単語を最小限に抑える必要があります。 スタイルコードの目標は、あなたが単語を書かなくても、スタイルコード自体にスタイルの単語を入れることであることを覚えておいてください。

例えば、クレヨンプロンプトでは、代わりにこのように調整したい:

crayon drawing, a spooky house クレヨン画、不気味な家

/tune crayon drawing, a spooky house

ずっといい。クレヨンで描かれた実際の家。

特にたくさん書くことに慣れている人は、プロンプトを絞り込むのに時間がかかるかもしれません! 注:スタイル・ワードなしでチューニングすることもできますが、それは少し難しいので、この記事ではあまり触れません。

特定の題材とスタイルの組み合わせは、現実には存在しません。 たとえば、5歳児にエヴァンゲリオンを観せるのは残酷だから、5歳児がエヴァンゲリオンを描くことは現実にはあり得ません。

ここは機械の創造性が輝く分野です。 考えてみれば、これは非常に信じられないことですが、5歳児が描いたエヴァンゲリオンの実際のデータは存在しないため、これを描くことができるスタイルは、そのような題材+スタイルの組み合わせの統計的な可能性の低さと戦っていることになります。

データサイエンスでは、これを「バイアスの修正」と呼びます。 現実世界ですべての猫がピンク色で描かれている場合、モデルはオレンジ色の猫を描くのに苦労するでしょう。 オレンジ色の猫を描くためには、ピンク色の猫に対するモデルの好み(バイアス)を修正する必要があります。

niji スタイルチューナーを使えば、あなたもその感覚を味わうことができます。 これを行うには、境界プロンプトが必要です。

「境界プロンプト」とは、チューナーに表示される多くの画像が、ステップ 1 の要件を満たしていないというものです。

これがどのように機能するかを理解するには、次のようなシナリオを想像してください。例を通して何かが植物なのか動物なのかを誰かに教えているとします。 猫、犬、バラ、松の木について話すのは、情報量がかなり少なく、それらが植物なのか動物なのかは明らかです。 しかし、植物のように見える動物 (イソギンチャク)、または動物のように食べる植物 (ハエトリソウ) は、非常に多くの情報量を持っています。それは、従来の知識を用いて明らかに導き出すことが難しい決定に対する裁定です。言い換えれば、境界プロンプトです。これらの一つをスタイルをチューニングするために欲しくなるでしょう。

要約しましょう: この時点で、目の前にはスタイルワードとグリッドを手にしています。

スタイルで求めている条件のリストを作成しました

そのスタイルを表現するために必要な単語数を最小限に抑えました

あとは、実際にそのスタイルに合う絵を選ぶだけです

crayon drawing, a spooky house (クレヨンの絵、不気味な家)は、条件のリストを満たすグリッド上の描画が多すぎるため、境界プロンプトとしては適切ではありません。

💡

ステップ 1 の条件を満たす生成結果が存在するが、ステップ 1 の条件を満たさない生成結果も存在する場合に、境界プロンプトを選びます。

crayon drawing of a girl with blonde hair and blue eyes (ブロンドの髪と青い目の女の子のクレヨン画)は、境界プロンプトとしてははるかに優れています。 より明確な失敗条件があります。

このようなグリッドを見たときは、私は比較ビューを拡大してルールを再検討します:

定義したステップ 1 のルールに基づいて、ほとんどの選択肢を却下します:

求めるクレヨンのスタイルは、デジタルではなく伝統的なものです。

多くのセットが失敗するのは、レンダリングがデジタルすぎるからです。

望むクレヨンのスタイルは、子供の落書きのように下手に描かれている必要があります。 私たちは優れたクレヨンアートを求めているわけではありません。

多くのセットが失敗するのは、従来のレンダリングが子供の絵としては良すぎるためです:

(クレヨンじゃなくても!)

求めるクレヨンのスタイルは、人物や建物にも適用できるものでなければなりません。 他のオブジェクトの描画が悪くても問題ありません。

人物と建物では、「建物」よりも「人物」の方が子供のクレヨン風に表現するのが難しいようです。そのため、「人物」については 1 つのチューナーに留めることができます。 自分のスタイルに複数の要件がある場合は、満たしたい主題ごとに複数のチューナーを分割する必要があります。

さて、自分のスタイルの不適格要素を特定したので、あとは美的好みを直接的に判断することです。 美学について自問自答する前に、3 ステップ待ったことに注目してください。

この 2 種類の下手な絵ではどちらが好みですか?

💡

自分が望むものについて明確なビジョンを保つことが美学の鍵です。

5 歳児のスタイルのクレヨン絵が欲しいです。右側の絵は、年少の子供ではなく、10 代の若者が描くようなものに見えるので、左側を選択する必要があります。

自分自身に厳しくなってください。元のコンセプトを満たす選択ではなく、見た目のきれいな選択に逸れてしまう誘惑に駆られがちです。 純粋かつシンプルにしてください。 本来のコンセプトを満たさないものは入れないでください。

やったね!診断に注意深く答えたので、貴重なスタイル コードを手に入れました!

4MSFgkbAzqAL30fKxGBupzCU6BeelAvx6

チューニングされたスタイルの出力を、デフォルトの niji 5 のスタイリングと比較します:

crayon drawing, castle in the air --style 4MSFgkbAzqAL30fKxGBupzCU6BeelAvx6

crayon drawing, castle in the air

万歳! 次は何?

テストの時間です! スタイル コードを取得し、それを使用して他のプロンプトを生成します。

💡

ステップ 2 のスタイルワードを使用してチューニングしたことを思い出してください。 プロンプトが機能するには、これらのスタイル ワードを使用し続ける必要があります。

期待どおりに動作すれば、完了です!

期待どおりに動作しない場合は、何が問題なのかを特定します

同じプロンプト内で一貫性をない場合

ステップ 2 に戻り、異なるスタイルワードを選択してみてください

特定の主題に関して問題がある場合

ステップ 3 に戻り、主題に沿った単語を使用します

自分のイメージに近いスタイルが決まったら、次はそれを中心に探索してみましょう。 選択した選択肢を維持したまま、一度に 1 つずつスタイルを足りたり引いたりしながら、そのスタイルをゆっくりと試してみることをお勧めします。

上記の方法論が、スタイルチューニングという複雑なプロセスのコツのいくつかを明らかにしてくれることを願っています。 最高に楽しい旅になりますように!

関連する記事

にじジャーニー

にじジャーニーとはなんですか?

あなただけのオリジナルアニメイラストを描く、最先端 AI "にじジャーニー" へようこそ!Spellbrush と Midjourney が共同でデザインした、魔法のようなツールです。キュートなちびキャラからダイナミックなアクションシーンまで、にじジャーニーはあなたの思いをカタチにします。皆さんが作成した作品を見るのが待ちきれません!

Download on the App StoreGet it on Google Play

どちらに連絡すればよろしいですか?

AI 研究者でアニメが好きな方は、ぜひ [email protected] までメールでご連絡ください。

その他、就職活動中の有能な方には、当社の採用ページでその他の募集職種もご用意しております。

商用利用に関するお問い合わせやスタジオライセンスについては、[email protected] までお問い合わせください。