Dolly Merge XL

1. Introduction

This LoRA has been trained with images of ball-jointed dolls (BJDs).

Motivation: I want to nicely add doll-like cuteness, delicacy, and a sense of reality to the 2D characters created by these two awesome models!

• Animagine XL V3 – Trigger word: dolla

• Pony Diffusion V6 XL – Trigger word: dollp

This LoRA, which merges LoRAs created based on each of these models, but it would work with any SDXL checkpoint model.

Using the appropriate trigger word (‘dolla’ or ‘dollp’) for the models may yield better results. *If you are not sure, it’s okay to set any or none (Honestly, I don’t know what is correct)

このLoRAは、ドール(BJD)画像によって学習を行っています。

主に、Animagine XL V3 と Pony Diffution V6 XL という激アツモデルからお出しされるやべーキャラをいい感じにドールっぽくしたい！という動機で作成しています。

このLoRAは、これら2つのモデル向けに作ったLoRAを1つにマージしたLoRAになります。ですが、基本どのSDXLモデルでも使えると思います。

それぞれのモデル用のトリガーワード( dolla, dollp )は、使用するモデルに合った方を使うことでより良い結果が得られるかもしれません。※分からなければ適当でも、設定しなくても問題無いです。(正直、何が正解なのか自分にもわかりません)

2. Basic Templates

realistic photo of detailed bjd, doll joints, plastic skin, detailed face, detailed hair, smooth hair, 
1girl ...

• ‘doll joints’, ‘plastic skin’ are as you like.

  If you don’t like it, set to negative prompt.

• If you like, add to ‘dolla’ or ‘dollp’. (or change ‘bjd’ to it)

• For Pony Diffusion XL: Might be better to remove ‘realistic photo of’ (especially ‘realistic’)

If detail is not sufficient, try adding more:

sharp focus, depth of field, ray tracing, 8k, extremely detailed, absurdres, 

適当に上のやつを組み合わせてプロンプトを作ってみてください。Pony Diffusionを使うときは ‘realistic’ は無いほうがいいです（ケバくなりがち。むしろネガティブに入れた方が良い）

3. Limitations, Probrems

• Simply applying it is often ineffective, depending on the model used

  • Please refer to the sample images and templates to set the prompts

  • Try raising to weight: ~2.0

  • If you want to add realism, you might try this LoRA combined

  • for Animagine XL, this LoRA ( trained with bjd doll images ) might be a better choice

• Male dolls are not included in training data

• Mysterious stuffed toys tend to be born

  • Try adding negative prompt to ‘plush’,’stuffed toy’,etc., depending on the situation

  • If possible, please remove the word “doll” from positive prompt. For example, replace “doll joints” with “ball joints”.

• Incompatibility with some LyCORIS models

• 使うモデルによりますが、単純に適用しただけでは効果が薄い事が多いです

  • サンプル画像やテンプレを参考にしてプロンプトを調整してください

  • LoRAのウエイトを上げてみてください（上限 2.0 くらい）

  • リアルさが欲しい場合、このLoRA との併用をお試しください

  • Animagine XL なら このLoRA を選択した方が良いかもしれません(BJDで学習されたモデル。併用もオススメです)

• 男性ドールは学習データに含んでいません

• 謎のぬいぐるみが生まれやすいです

  • ネガティブに ‘plush’ や ‘stuffed toy’ などを入れると多少軽減すると思います

  • 可能ならポジティブから’doll’を排除してください(doll joints ⇒ ball joints に置き換えるなど)

• 一部のLyCORISと相性が悪いようです