Физический движок (обычно) не привязан к выводу. Он работает на CPU, (обычно) имеет фиксированное время просчета кадра (исчисляемое от системного времени) и обязан успевать просчитать всё за это время. Если он всё-таки не успевает, то мы наблюдаем "торможение", но его "кадры" (тики / итерации главного цикла) никогда не пропускаются.
Какие-то отдельные, независимые от моментального игрового состояния функции могут обсчитываться параллельной очередью. Например, ИИ может отложенно оперировать устаревшими данными сцены, полученными в предыдущие кадры, для построения маршрутов многочисленных ИИ-агентов. Впрочем, параллельная очередь может также сбрасываться по фиксированному времени, если не успевает всё обсчитать за это время.
Обработка ввода (клавиатура/мышь) и вывода (дисплей), при этом, происходит параллельно. И синхронизируется с физикой/главным циклом "как придётся", "как ляжет", "как сквантуется".

> Если физика это не учтёт, то вся динамика игры сдвинется на 1/60 сек.

Движение в движке - результат интерполяции. С фиксированным кадром мы получаем только замедление динамики (игрок это чувствует, как и сетевую задержку, и подстраивается). В движках с плавающим кадром, когда deltaTime большое, он наблюдает "рывки", к которым не приспособишься.