自分も試行錯誤している最中なので最適解は答えられませんが
よくやっている設定は
Steps: 35
Sampler: DPM++ 2M SDE Karras,
CFG scale: 5
Denoising strength: 0.5
ADetailer:顔(0.4)
ControlNet 0:オープンポーズ（dw_openpose_full）
ControlNet 1:SoftEdge または Lineart
で、
とりあえず一回目は ebsynth_utility のステップ通り出力して、
その内容を見て色々調整しています。
特にコントロールネットで「 Reference 」を使用する場合は
ControlNet 0:オープンポーズ（dw_openpose_full）
ControlNet 1:SoftEdge または Lineart
ControlNet 2:Reference(reference_onry)t
として
step3 の部分を「ebsynth_utilityスクリプト」を使用せずに
img2imgのバッチ処理で行ったりすることが多いです。
あと、気に入らないフレームは個別にimg2imgして差し替えたり
地道な手作業を行う場合も多いですね