ヒープ領域が足りなくてずっと例外ばっかり出てたのですが、
Visual Studio のリンカー→システム→ヒープサイズの設定, スタックサイズの設定にそれぞれ10485760(10MB)と書いたらなんか直ったっぽいです。

丸一日似たような作業をしていたのに直らなかったので、すごく困惑していますが、とりあえずこれでよしとします。

一画面に10MBを超える3Dモデルは配置できないということなので、画面外のモデルは破棄する必要がありますね。