サバカンさんのを無印VR移植したのはGitHubにあったんで参考に

https://github.com/KoikDaisy/KK_FixationalEyeMovementVR/blob/master/src/PluginCode/KK_FixationalEyeMovementVR.cs

こっちは左右の目のパスを取って3Dで回してる
おそらくこっちの処理の方が正当処理だと思うけど、3D回転を制限するのはちょい面倒かも

quarerionとかeuler角とか頭こんがらがる