现场演绎“一句话建模” Unity中国推动AI技术赋能千行百业


(资料图片)

2月25日,“2023全球人工智能开发者先锋大会”(GAIDC)在上海临港召开。作为早已前瞻性在AI领域布阵的实时3D引擎,Unity不仅深度参与峰会,展示了Unity+AI在汽车、数字人、元宇宙等领域已呈现的成熟解决方案;同时也在AIGC这一人工智能的重要领域,阐述了3D技术目前所面临的挑战及即将为全行业带来的生产力革命。

大会首日,在以“见于既萌,追光而行”为主题的2023AIGC前沿论坛上,Unity中国高级经理兼跨端移植技术负责人孙志鹏做了题为《AIGC赋能3D内容创作》的演讲。孙志鹏通过梳理3D底层技术中的多模态问题,对即将在AIGC时代普及的AI建模进行了清晰的推演。

以3D创作中常见的“场景生成”任务为例,AI介入后很有可能出现的模式路径是:首先通过GPT类型的语言模型对来自用户的建模需求生成足够详细的描述,再经由多模态模块完成融合后,驱动一个全可微的程序化建模模块用于生成场景,之后将可微渲染器给出的渲染结果交由对比图文预训练(CLIP)模块生成尽量贴合此前用户描述的图像和视频,至此也就建构了将自然语言转化为3D场景的流畅通路,完成了“一句话建模”。

据悉,此前,Unity已经通过AI技术大幅度简化了3D资产的生产流程:比如由AI赋能的Ziva工具集,可以让虚拟人的脸部创作周期从原来的数周降低为单次按钮点击;美术辅助工具World Generation,能够帮助用户快速生成地形,并实时模拟出真实的光影效果;而借助计算机视觉和深度学习,RestAR则实现了在移动设备中对产品进行高质量的3D扫描和渲染。

在业内看来,AI将从根本上改变3D数字资产的生产方式,大规模解放创造力,让更多的人能够参与虚拟世界的打造。抓住其中的契机,Unity也正积极探索通过AI技术不断降低创作门槛,为各行各业带来提速与增产。

孙志鹏在演讲后的采访中表示:“Unity会在程序化数字资产生成和可微渲染的部分,为AIGC的实现做能力加强和生态储备,同时也参与各类预训练模型的使用探索,为学术界不断涌现的创新成果铺设落地环境,最终目标是让用户可以通过AI技术,无门槛地高效完成数字资产的制作,指数级降低虚拟世界和各类元宇宙的开发成本。”

据悉,Unity中国是全球领先的交互式实时3D内容创作和运营平台Unity在中国的合资公司。截至2021年底,全球排名前1000的移动游戏中使用Unity制作的游戏占比高达72%。全球前十大汽车OEM厂商,以及国内包括蔚来、小鹏、理想等造车新势力都在使用Unity的产品与服务。未来,Unity中国将持续加大研发投入,致力于打造中国本土的、适配各类国产软硬件平台的数字生产力工具,丰富由实时图形渲染技术支撑的AR、VR、MR以及数字孪生体验,赋能中国数字经济安全、稳定、健康发展。

(文章来源:上海证券报·中国证券网)

关键词: Unity 技术赋能 一句话建模