Sketch2Scene: Automatic Generation of Interactive 3D Game Scenes from User's Casual Sketches

Генерация интерактивных 3D-игровых сцен по нарисованным от руки эскизам и текстовым описаниям.

Под капотом генератор картинок, ControlNet, LoRa на SDXL-Inpaint, Grounded Segment Anything.


Для процедурного синтеза 3D-сцены используется игровой движок Unity

Кода нет, есть понимание чего ожидать в играх

#sketch2scene #text2scene #news