回転した顔は今あるモデルじゃ絶対まともに描けないから
一旦顔崩れ無視してそれ以外を整えて出力した後、画像を回転させて顔だけinpaintするとか2段構えで対処するしかないよ