私は以前、目の辺りにそれが発生した時がありました
いろいろやったけど、解決策は見つからず
GANパラメーターに数値を入れて学習させた影響かも、と思いましたが検証はしていません
その現象が発生していない頃の学習モデルに戻して、GANを入れずに追加学習させたら出なくなるかも