SIGGRAPH2025|上科大、影眸联合提出DressCode:从文本生成3D服装板片


SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片
AIxiv专栏是本站发布学术、技术内容的栏目。过去数年,本站AIxiv专栏接收报道了2000多篇内容,覆盖全球各大高校与企业的顶级实验室,有效促进了学术交流与传播。如果您有优秀的工作想要分享,欢迎投稿或者联系报道。投稿邮箱:liyazhou@jiqizhixin.com;zhaoyunfeng@jiqizhixin.com

3D生成是生成式人工智能和计算机图形学领域最引人注目的话题之一,符合*、游戏标准的3D生成尤其受产业界关注。在生产流程中,一般品类的3D资产往往通过手工建模或者扫描的方式制作。但作为3D资产的一个重要类别,服装资产的往往来源于平面板片与物理模拟等流程,而不是直接在3D上建模。

上海科技大学、影眸科技与宾夕法尼亚大学联合提出DressCode,它是首个完全支持 CG 操作,能够兼容到工业流程的 3D 服装生成框架,并通过文本的引导,实现自动生成具有高质量渲染效果、可编辑、可驱动、可*的 3D 服装。SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片
Dresscode已经被计算机图形领域国际顶级期刊 Transactions on Graphics 接收,并将在国际计算机图形顶级会议 SIGGRAPH 2025 上展示。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

siggraph2024|上科大、影眸联合提出dresscode:从文本生成3d服装板片

  • 项目链接:https://sites.google.com/view/projectpage-dresscode
  • 论文链接:https://arxiv.org/abs/2401.16465

引言

服装在人类外观中扮演着重要角色,这突显了服装数字化对于数字人创造的重要性。近期在 3D 内容创造领域的巨大进展对于数字人的创造至关重要。

然而,对于服装生成的工作仍有空缺,由于通用生成方法生成的网格或神经场与实际数字服装生产流程不兼容,使这类方法直接应用于服装类别并未能达到很好的效果。

为了解决这些问题,来自影眸科技与上海科技大学的研发团队提出了一个文本驱动的 3D 服装生成框架——DressCode,旨在为初学者设计数字服装简单化,并在时尚设计、虚拟试穿和数字人创造提供巨大潜力。

该框架可以通过自然语言交互生成对 CG 流程友好的服装模型,并且还便于版片补全和纹理编辑, 通过用户友好的交互简化了设计过程。本文将对 DressCode 的主要功能进行详细介绍,并探讨其在实际设计场景中的应用前景。

SewingGPT 框架概述

SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片

对于版片生成模块,该论文提出了 SewingGPT,这是一个基于 GPT 的自回归模型,用于通过文本提示生缝纫版片。其首先将缝纫版片参数转换为一系列量化的token,训练了一个 Decoder-only Transformer。并通过在Transformer中融合使用文本提示词的交叉关注力,来达到用文本来引导生成结果。

训练完成后,该模型可以根据用户条件自回归地生成token序列,并将生成的序列经过反向量化来得到生成的缝纫版片参数。

DressCode 框架概述

SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片

借助 SewingGPT,该框架能够直接从文本提示中生成多样化的缝纫版片。由于材质贴图在 CG 流程中非常关键,该框架为这些版片生成相应的基于物理的纹理,更紧密地与服装设计工作流程相契合。

作者们提出的DressCode框架,通过利用 SewingGPT 和 PBR 纹理生成器来生成3D服装的几何部分与纹理部分,并且进一步利用大型语言模型通过自然语言交互为用户创建定制服装。

在实现通过文本提示生成缝纫版片和纹理之后,为了在实际场景中使设计师能够使用自然语言与生成器交互,而不是依赖于数据集格式的提示,作者们采用 GPT-4 进行内容学习,以解释用户的自然语言输入,生成几何提示词和纹理提示词。

这些提示词输入到 SewingGPT 和 PBR 纹理生成器后,得到生成的缝纫版片与纹理,并经过*、渲染得到最终的结果。同时,生成的服装以及 PBR 纹理可以被无缝整合到工业软件中,可以与人体模型进行动画驱动,并在各种照明下进行渲染,确保生动、逼真的效果。

SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片

版片补全能力

得益于自回归模型,SewingGPT可以通过利用模型提供的概率预测,在接收到部分版片信息后补全整个缝纫版片。此外,输入一个文本提示可以指导模型补全缝纫版片。如给定一个袖子后, 该模型能够根据不同的提示补全完成各种缝纫版片。这使得用户能够手动设计部分版片,利用 SewingGPT 进行灵感激发并基于文本提示来补全服装。

SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片

码上飞 码上飞

码上飞(CodeFlying) 是一款AI自动化开发平台,通过自然语言描述即可自动生成完整应用程序。

码上飞 430 查看详情 码上飞
纹理编辑能力

在近期大多 3D 生成任务中,无法产生结构化的 UV 映射是对实际应用场景一个重大障碍,尤其是在生成服装时,使其无法用于实际设计场景。本文提出的生成方法,利用缝纫版片表示,使得能够创建每个版片独特且结构化的 UV 映射。这也促使用户可以在特定位置便捷得编辑纹理,支持对纹理贴图进行高效的后处理。

SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片

应用和展望

DressCode 框架在与其他方法比较中取得了优异的成绩,该框架作为第一个基于缝纫版片的服装生成工作,能够让初学者和专业设计师都能通过简单的文本提示生成高质量的缝纫版片和 PBR 纹理,使服装设计流程大幅简单化。

SIGGRAPH2024|上科大、影眸联合提出DressCode:从文本生成3D服装板片

DressCode 的易用性和创新方法有望推动数字服装的未来发展。这类以缝纫版片为基础的生成任务,将推动虚拟试穿、时尚设计和数字人创造的数字服装领域的发展,让我们共同期待。

以上就是SIGGRAPH2025|上科大、影眸联合提出DressCode:从文本生成3D服装板片的详细内容,更多请关注其它相关文章!


# 量产  # 沈阳seo技巧平台  # 360网站推广收费  # 建网站如何做推广  # 潼南外贸推广网站  # 公司怎么建设网站教程  # 内蒙古网站优化建设团队  # 梅州seo推广多少钱  # 盐都区seo优化效果好  # SEO业务赚钱吗  # 如何做公众号SEO  # 高质量  # 产业  # 这类  # 可以通过  # 宾夕法尼亚大学  # 提出了  # 并在  # 丰田  # 自然语言  # 科大  # type  # follow  # 3d生成 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894 】


相关推荐: XREAL发布新款硬件XREAL Beam投屏盒子:可悬停AR空间屏  零AI含量!纯随机数学无限生成逼真3D世界火了,普林斯顿华人一作  OpenAI限制网络爬虫访问以保护数据免被用于AI模型训练  Meta Quest订阅服务每月7.99美元畅玩两款VR游戏应用  MIT开发“PhotoGuard”技术保护图像免遭恶意AI编辑  抛媚眼给瞎子看?微软、谷歌的AI广告被广告主抵制  1.6亿美元收购Singularity AI,昆仑万维布局通用人工智能  Zoom远程会议应用:AI培训需经用户授权  12页线性代数笔记登GitHub热榜,还获得了Gilbert Strang大神亲笔题词  常见的五个人工智能误解  AI新风口?首个高质量「文生视频」模型Zeroscope引发开源大战:最低8G显存可跑  华为云盘古大模型3.0发布 AI云服务同时上线:200亿亿次性能  CREATOR制造、使用工具,实现LLM「自我进化」  改动一行代码,PyTorch训练三倍提速,这些「高级技术」是关键  大模型新品出现井喷,AI产业迎来新时代  如何用AI重塑你的工作流(一)  速途网络成立“人工智能专家委员会”5位中美博士加盟  创新科学家成功研发FAST激光靶标维护机器人  “无人驾驶船”将首次亮相世界人工智能大会,下半年或开进上海迪士尼  Midjourney创始人:AI应该成为人类思想的延伸  第二届光合组织AI解决方案大赛赛果揭晓  美图开拍使用教程  大疆 Air 3 无人机售价和实物照片曝光  25个AI智能体源码现已公开,灵感来自斯坦福的「虚拟小镇」和《西部世界》  高通发布长期产品计划,为工业和企业物联网产品提供全新组合方案  马斯克的幽默“现实”:AR眼镜与20美元“增强现实”哪个真实?  【搞事】时隔4年 谷歌更新安卓logo 机器人头更饱满了  人工智能产业协同创新中心:全产业链资源在这里汇聚  500元一张的AI艺术二维码制作,详细教程来了!  深企派遣无人机救援队赴京津冀开展防汛救灾任务  关于开展“与AI共创未来”——2025年全国青少年人工智能创新实践活动的通知  全国体育人工智能大会举办,专家聚焦体育人工智能领域人才培养  百亿量化私募:量化投资进入“精耕细作”时代 AI带来行业新变革  国产医疗企业的人工智能  7条线路感受智慧美好生活,“2025 世界人工智能大会民营企业社会开放日”主题活动启动  全球首款AI裸眼3D平板 国产的售价破万  构建AI绘画网站的方法:使用API接口和调用步骤  微软商店 AI 摘要功能开启预览,帮助用户迅速了解应用评价  跟着AI大热的“光模块”到底是什么?  微软bing聊天推出AI购物工具 可进行比价并查看历史最低价  开创全新虚拟现实体验的Pimax Crystal VR头显  人工智能如何用于家庭安全  数据显示:人工智能相关专业热度上升最快 考古、美术、生物医学工程等小众专业火了  支持跨语言、人声狗吠互换,仅利用最近邻的简单语音转换模型有多神奇  苹果AI战略与微软谷歌大相径庭,到底是领先还是落后?  李开复:未来几年,人工智能会革了所有人的命,除非你这么做  OpenAI大神Karpathy最新分享:为什么OpenAI内部对AI Agents最感兴趣  宇宙探索下一阶段,机器代替人类,AI会在太空探索中取代人类吗?  AI技术加速迭代:周鸿祎视角下的大模型战略  能走、能飞、能游泳,科学家打造全能 M4 机器人 

 2024-07-11

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.