Как правильно сделать “Hover” камеру?

Там, скорее всего, модель движения камеры конфликтует с лимитами, поэтому и происходит тряска.

webgl писал(а):

В общем то вопрос в том есть ли какие то решения или надо просто конвертировать скринспейс в нужную плоскость (как в таком случае сохранить инерции как в controls при движении, их надо будет воссоздать)?

Можно использовать оригинальный MapControls из примеров, отсюда: https://github.com/Soft8Soft/verge3d-code-examples/blob/master/js/controls/MapControls.js

И потом в js файле, после загрузки сцены, сменить тип контролов, например, в runCode:

function runCode(app) {
    if (app.controls) {
        app.controls.dispose();
    }
    app.controls = new v3d.MapControls(app.camera, app.renderer.domElement);
}