AIGC+3D:

開創(chuàng)家居導(dǎo)購新時(shí)代淘天集團(tuán)業(yè)務(wù)技術(shù)-算法工程師案例簡介淘寶放我家——家裝行業(yè)個(gè)性化導(dǎo)購工具a2m.msup案例背景QuestMobile2023家居家裝行業(yè)趨勢(shì)洞察市場(chǎng)潛力某省市場(chǎng)潛在用戶達(dá)1.03億，行業(yè)用戶突破2000萬行業(yè)趨勢(shì)：當(dāng)下消費(fèi)者追求個(gè)性化和有品位的生活空間，喜歡看家裝搭配和家居美學(xué)相關(guān)的內(nèi)容a2m.msup案例背景產(chǎn)品心智：淘寶上懂裝修的“設(shè)計(jì)師”幫用戶進(jìn)行智能布局搭配和可視化決策住小幫&巨量算數(shù)：2023住小幫家居家裝洞察白皮書用戶痛點(diǎn)沒有購買頭緒，憑感覺看看花大量時(shí)間搜索商品、對(duì)比糾結(jié)視覺搭配、擔(dān)心單品與整體家裝的搭配是否協(xié)調(diào)無法預(yù)覽擺放效果，擔(dān)心尺寸不合適，退換麻煩a2m.msup方案選型數(shù)字化建模設(shè)計(jì)渲染3D式交互傳統(tǒng)3D建模式方案寸

可以直觀看到家具的立體效果寸

可操縱性好，支持單品的換位置，換朝向，還可以更換單品寸

真實(shí)反映家具的尺寸，與場(chǎng)景的物理關(guān)系（約束、光影）?

對(duì)硬件要求高，渲染質(zhì)量好壞?

3D物料不足，內(nèi)容不豐富?

設(shè)計(jì)成本高，依賴真實(shí)設(shè)計(jì)師?

操作復(fù)雜，上手成本高a2m.msup方案選型AIGC技術(shù)寸

AIGC技術(shù)浪潮，技術(shù)迭代升級(jí)快寸

可短時(shí)間大量出圖，大幅度降低建模成本寸

AI智能為用戶提供個(gè)性化搭配，為用戶“量身定制”?

AIGC生成的內(nèi)容不夠精確，實(shí)現(xiàn)精細(xì)粒度的控制難度較高?

目前基于2D的AIGC技術(shù)缺少3D尺寸信息，且對(duì)物理規(guī)則的理解較淺1分鐘毛坯房變精裝修，AIGC如何改變4萬億家居產(chǎn)業(yè)鏈？a2m.msup方案選型我家方案個(gè)性化數(shù)據(jù)風(fēng)格偏好商品偏好用戶偏好場(chǎng)景編輯器空間編輯&預(yù)覽商品擺放我家還原布局&搭配布局調(diào)整俯視圖預(yù)覽AR預(yù)覽空間解讀用戶拍照?qǐng)鼍敖Y(jié)構(gòu)化天地墻理解LLM設(shè)計(jì)師智能搭配單品推薦成套搭配推薦布局推薦商品供給供給管理空間供給分層化AIGC智能渲染AI繪制GLB模型渲染商品知識(shí)庫a2m.msup淘寶放我家——技術(shù)框架室內(nèi)三維結(jié)構(gòu)解析技術(shù)挑戰(zhàn)用戶家空間如何數(shù)據(jù)化？沉浸式體驗(yàn)?zāi)壳捌占奥瘦^低頭顯手機(jī)端3D掃描/視頻：操作復(fù)雜拍照片：簡單快捷a2m.msup室內(nèi)三維結(jié)構(gòu)解析技術(shù)挑戰(zhàn)用戶家照片如何三維化？缺少空間約束，放置不合理三維解析前a2m.msup三維解析后基礎(chǔ)的空間結(jié)構(gòu)還原，合理的透視關(guān)系技術(shù)挑戰(zhàn)寸

使用方便，用戶只需要用手機(jī)拍下自己家的照片寸

合理的家具擺放關(guān)系，床放置在地板上，掛畫放置在墻壁上?

缺少尺寸信息、無法真實(shí)反映家具與場(chǎng)景的大小關(guān)系a2m.msup室內(nèi)三維結(jié)構(gòu)解析技術(shù)細(xì)節(jié)技術(shù)挑戰(zhàn)LLM設(shè)計(jì)師智能搭配用戶需求LLM商品知識(shí)庫設(shè)計(jì)知識(shí)庫設(shè)計(jì)案例庫結(jié)構(gòu)化案例空間感知商品搭配生成布局調(diào)整生成方案非結(jié)構(gòu)化知識(shí)a2m.msup布局推薦技術(shù)挑戰(zhàn)LLM設(shè)計(jì)師a2m.msup高保真渲染技術(shù)挑戰(zhàn)如何在圖像中展現(xiàn)家具的擺放和編輯？a2m.msup高保真渲染技術(shù)挑戰(zhàn)手工P圖AI繪制光影、視角不自然技術(shù)要求較高，很耗時(shí)a2m.msup用戶覺得視覺效果很贊高保真渲染技術(shù)挑戰(zhàn)自研高保真AI繪圖大模型（技術(shù)論文將開源）寸

商品高保真繪制寸

光影自然寸

視角和諧寸

透視關(guān)系合理寸

秒級(jí)繪制寸

低成本a2m.msup技術(shù)挑戰(zhàn)供給管理商家-商品圖片&尺寸商家-商品3D模型前景分割A(yù)I繪制可用性評(píng)估&過濾排序可用商品庫模型質(zhì)量評(píng)估模型分層圖預(yù)處理設(shè)計(jì)師-展廳方案商家-空間供給可用空間庫可用性評(píng)估（視角/搭配/布局）可編輯化的分層處理（軟裝/硬裝）可用商品a2m.msup商品特征庫商品特征提取視覺特征多維特征空間尺寸整合產(chǎn)品入口(內(nèi)測(cè)中)應(yīng)用實(shí)踐放我家工具a2m.msup商品詳情裝修初期用戶查找搭配靈感應(yīng)用實(shí)踐設(shè)置我家a2m.msup裝修初期用戶查找搭配靈感應(yīng)用實(shí)踐智能搭配自由搭配a2m.msup裝修中后期用戶已有搭配方案看裝修實(shí)效應(yīng)用實(shí)踐實(shí)拍家照片選擇家具并放置體驗(yàn)鏈接a2m.msup案例總結(jié)產(chǎn)品定位技術(shù)亮點(diǎn)用戶體驗(yàn)裝修好幫手智能家裝設(shè)計(jì)師裝潢模擬，個(gè)性搭配虛擬預(yù)覽，確保尺寸一鍵對(duì)比，快速?zèng)Q策即刻某省市心省時(shí)AIGC+

3D室內(nèi)三維結(jié)構(gòu)解析a2m.msup3D圖層化編輯LLM智能搭配&布局AIGC高保真繪制搭配很專業(yè)，有美感展示效果真實(shí)，光影自然，比自己P圖強(qiáng)自己動(dòng)手設(shè)計(jì)很便捷，有參與感用戶方案保存率大幅提升未來展望未來趨勢(shì)3D數(shù)據(jù)為AIGC的發(fā)展提供養(yǎng)料，增強(qiáng)AIGC對(duì)空間概念和物理規(guī)則的理解AIGC大幅降低建模成本，反向牽引大規(guī)模3D語料的生產(chǎn)結(jié)合3D數(shù)據(jù)語料的豐富，AI逐步改善3D的生產(chǎn)環(huán)節(jié)，最終精確構(gòu)建出一個(gè)有創(chuàng)造力的虛擬世界”a2m.msupQ & Aliguoqiu.-inca2m.msup麥某著名企業(yè)是一家面向技術(shù)型企業(yè)的培訓(xùn)咨詢機(jī)構(gòu)，攜手2000余位中