Loraモデルを使用して比較してみました
RTX2070使うと1枚当たりだいたい半分くらいの生成時間で済みました

scale3/step10-12あたりがいい感じです