AIGC+3D: 开创家居导购
新时代
淘天集团业务技术-算法工程
师
案例简介
—家装行业个性化导购工具
案例背景
QuestMobile2023家居家装行业趋势洞察
市场潜力某省市场潜在用户达亿,
行业用户突破2000万
行业趋势:当下消费者追求个性化和有
品位的生活空间,喜欢看家装搭配和家
居美学相关的内容
案例背景
产品心智:的“设计师” 帮用户进行智
能布局搭配和可视化决策
住小帮&巨量算数:2023住小帮家居家装洞察白皮书
用户痛点
• 没有购买头绪,凭感觉看看
• 花大量时间搜索商品、对比
• 纠结视觉搭配、担心单品与整
体家装的搭配是否协调
• 无法预览摆放效果,担心尺寸
不合适,退换麻烦
方案选型
数字化建模 设计 渲染 3D式交互
传统3D建模式方案
寸 可以直观看到家具的立体效果
寸 可操纵性好,支持单品的换位
置,换朝向,还可以更换单品
寸 真实反映家具的尺寸,与场景
的物理关系(约束、光影)
✕ 对硬件要求高,渲染质量好坏
✕ 3D物料不足,内容不丰富
✕ 设计成本高,依赖真实设计师
✕ 操作复杂,上手成本高
方案选型
AIGC技术
寸 AIGC技术浪潮,技术迭代升级快
寸 可短时间大量出图,大幅度降低建模
成本
寸 AI智能为用户提供个性化搭配,为用
户“ 量身定制”
✕ AIGC生成的内容不够精确,实现精
细粒度的控制难度较高
✕ 目前基于2D的AIGC技术缺少3D尺寸
信息,且对物理规则的理解较浅
1分钟毛坯房变精装修,AIGC如何改变4万亿家居产业链?
方案选型
我家方案
个性化数据
风格偏好
商品偏好
用户偏好
场景编辑器
空间编辑&预览 商品摆放我家还原布局&搭配
布局调整
俯视图预览
AR预览
空间解读
用户拍照
场景结构化
天地墙理解
LLM设计师
智能搭配
单品推荐
成套搭配
推荐
布局推荐
商品供给
供给管理
空间供给
分层化
AIGC智能渲染
AI绘制
GLB模型渲染
商品知识库
—技术框架
室内三维结构解析技术挑战
用户家空间如何数据化?
沉浸式体验
目前普及率较低
头显 手机端
3D扫描/视频:操作复杂
拍照片:简单快捷
室内三维结构解析技术挑战
用户家照片如何三维化?
缺少空间约束,放置不合理
三维解析前
三维解析后
基础的空间结构还原,合理的透视关系
技术挑战
寸 使用方便,用户只需要用手机拍下自己家的照片
寸 合理的家具摆放关系,床放置在地板上,挂画放
置在墙壁上
✕ 缺少尺寸信息、无法真实反映家具与场景的大小
关系
室内三维结构解析
技术细节
技术挑战 LLM设计师
智能搭配
用户需求
LLM
商品知识库
设计知识库
设计案例库 结构化案例
空间感知
商品搭配生成
布局调整
生成方案
非结构化知识
布局推荐
技术挑战 LLM设计师
高保真渲染
技术挑战
如何在图像中展现家具的摆放和编辑?
高保真渲染
技术挑战
手工P图 AI绘制
光影、视角不自然
技术要求较高,很耗时
用户觉得视觉效果很赞
高保真渲染
技术挑战
自研高保真AI绘图大模型
(技术论文将开源)
寸 商品高保真绘制
寸 光影自然
寸 视角和谐
寸 透视关系合理
寸 秒级绘制
寸 低成本
技术挑战
供给管理
商家- 商品
图片&尺寸
商家- 商品
3D模型
前景分割
AI绘制可用性
评估&过滤
排序
可用商品库
模型质量评估
模型分层图预
处理
设计师- 展
厅方案
商家- 空间
供给
可用空间库
可用性评估
(视角/ 搭配/ 布局)
可编辑化的分层处理
(软装/ 硬装)
可用商品
商品特征库
商品特征提取
视觉特征 多维特征 空间尺寸
整合
产品入口(内测中)
应用实践
放我家工具
商品详情
装修初期用户
• 查找搭配灵感
应用实践
设置我家
装修初期用户
• 查找搭配灵感
应用实践
智能搭配自由搭配
装修中后期用户
• 已有搭配方案
• 看装修实效
应用实践
实拍家照片 选择家具并放置 体验链接
案例总结
产品定位 技术亮点 用户体验
装修好帮手智能家装设计师
装潢模拟,个性搭配
虚拟预览,确保尺寸
一键对比,快速决策
即刻某省市心省时
AIGC + 3D
室内三维结构解析
3D图层化编辑
LLM智能搭配&布局
AIGC高保真绘制
搭配很专业,有美感
展示效果真实,光影
自然,比自己P图强
自己动手设计很便捷,
有参与感
用户方案保存率大幅
提升
未来展望
未来趋势
3D数据为AIGC的发展提供养料,增强
AIGC对空间概念和物理规则的理解
AIGC大幅降低建模成本,反向牵引大
规模3D语料的生产
结合3D数据语料的丰富,AI逐步改善
3D的生产环节,最终精确构建出一个
有创造力的虚拟世界”
Q & A
liguoqiu.-inc
mailto:@
麦某著名企业是一家面向技术型企 业的培训
咨询机构,携手2000余位中外客座 技术团队
的能力提升、软件工 程效能和产品创新迭代,
超过3000余家企业 续约学习,是科技领域占
有率第1的客座导师
品牌,msup以整合全球领先经验实践为己任,
为中国产业快速发展提供智库。
关注msup多AI落
地实践