ロードかかってる時にタスクマネージャーのパフォーマンス→リソースモニタでファイルアクセス先みてみたら？？
VRの読み込み時だけ変なところにアクセスしてるのかも