А можно сразу так заливать или необходимо делать опалубку со стороны витража?

Не планируете в среднесрочной перспективе делать тёплую лоджию? Если такая вероятность есть, то лучше оставить небольшую щель до витража под замену на более широкий профиль или другое. Это лучше, чем потом стяжку крошить.
Да и не уверен, что пена хорошо перенесёт контакт с мокрой стяжкой. Лучше делайте опалубку.