WorldCraft

WorldCraft是由香港科技大学开发的基于大型语言模型（LLM）代理的3D世界创建与定制系统，旨在帮助用户高效构建和调整逼真的虚拟环境。该系统通过自然语言交互方式，使用户能够轻松生成复杂的室内外场景，并对其中的物体和布局进行精细化调整。WorldCraft由三个核心模块构成：ForgeIt用于单个物体的定制，支持程序化生成以实现几何和纹理的精确控制；ArrangeIt负责场景布局的生成，采用分层数值优化方法平衡功能与美学需求；轨迹控制模块则允许用户通过对话指令控制物体运动和相机轨迹，从而生成动画和视频。此外，系统兼容多种深度3D生成工具，提升了场景资产的丰富性，为非专业用户提供便捷的设计体验。