將三維形貌轉(zhuǎn)為藝術(shù)簡體畫?神經(jīng)輪廓算法助力繪制三維形狀精準(zhǔn)輪廓
描繪目標(biāo)的精確線條一直是藝術(shù)家引以為豪的高超手藝,寥寥幾筆就能刻畫出逼真的形貌。這看似簡單的背后卻需要藝術(shù)家長期的訓(xùn)練對(duì)三維形狀的深入理解和對(duì)線條的取舍與光影的平衡。
如何讓機(jī)器學(xué)會(huì)藝術(shù)家的這種能力是計(jì)算機(jī)視覺領(lǐng)域一個(gè)非常有意思的開放性問題,需要綜合三維形狀理解、視覺感知和圖像風(fēng)格化等多個(gè)領(lǐng)域的技術(shù)。來自麻省大學(xué)阿默斯特分校和Adobe的研究人員最近提出了一種結(jié)合可操作幾何特征的三維模塊和操作圖像與視角特征的圖像模塊共同實(shí)現(xiàn)對(duì)三維模型線條的描述,這種方法在精度和視覺效果上都超過了傳統(tǒng)的方法,可以精確簡潔地描述模型的線條表示。

Neural Contours模型
從三維形狀到二維線條草圖看起來簡單,但用先前的圖像風(fēng)格遷移方法來處理會(huì)使得模型無法有效獲取形狀隱含的的三維幾何信息。如果使用分析幾何類的算法雖然可以捕捉基本的線條特征,卻無法捕捉真實(shí)繪畫時(shí)候的復(fù)雜線條特征,針對(duì)每一個(gè)模型都需要一系列參數(shù)來調(diào)節(jié)。綜合三維分析和圖像特征是一個(gè)可行的研究方向。
在本研究中研究人員的目標(biāo)是通過三維形狀生成線條稿,模型包含了幾何與圖像兩個(gè)分支。其中幾何分支基于輪廓、凹凸和形貌實(shí)現(xiàn)線條的繪制,不同于現(xiàn)有手工調(diào)參方法,這一分支可以利用可差分模型自動(dòng)對(duì)參數(shù)進(jìn)行選擇。而圖像分支則使用了標(biāo)準(zhǔn)的圖像遷移網(wǎng)絡(luò)模型,同時(shí)加入了基于視角的形狀表示。通過兩個(gè)分支的有機(jī)結(jié)合可以為三維形狀得到較為清晰、完整、高效的線條表示。
下圖顯示了模型的基本架構(gòu),其輸入為三維形狀和相機(jī)參數(shù)、輸出為對(duì)應(yīng)視角下的2D灰度線條稿。

模型分為幾何分支和圖像遷移分支,其中幾何分支主要基于3D模型的幾何特征來進(jìn)行線條繪制、圖像遷移分支則通過圖對(duì)圖的遷移來學(xué)習(xí)線條,同時(shí)來利用了排序模塊來決定最好的線條參數(shù)。
幾何分支主要依賴于經(jīng)典的幾何線條定義,包括啟發(fā)性輪廓線(suggestive contours),脊線谷線與顯著脊線(ridges,valleys,apparent ridges)等。

生成線條的第一部分是輪廓線Occluding Contours,模型利用插值輪廓算法生成了一幅二進(jìn)制掩膜圖Ic,在輪廓線投影位置其值為'on'。這是無參數(shù)模型不需要進(jìn)行任何學(xué)習(xí),其生成結(jié)果如上圖b所示。
生成線條的第二部分是啟發(fā)性輪廓SC,可以定義啟發(fā)性輪廓是曲線殘差集合中值為零但方向?qū)?shù)大于零的點(diǎn)。針對(duì)網(wǎng)格可以通過尋找曲線殘差幾何的零集來得到這些曲線,如圖c所示如果渲染所有的SC是不現(xiàn)實(shí)的,利用一個(gè)閾值將較弱的SC去除掉得到如上圖d中的結(jié)果。為了自動(dòng)化地確定這一閾值,研究人員引入了可查分的方法來確定閾值的結(jié)果在網(wǎng)絡(luò)模塊的上半部分就顯示了SC的投影圖和殘差方向?qū)?shù)。另一部分與顯著脊線圖和視角相關(guān)的曲率一同作為輸入,以便自動(dòng)化確定了顯著脊線的閾值。上圖中g(shù)和h也相應(yīng)的顯示了顯著脊線在閾值過濾的前后結(jié)果。
發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長度6~500個(gè)字
圖片新聞
-

落地?zé)o錫!京東首個(gè)物流機(jī)器人超級(jí)工廠來了
-

OpenAI發(fā)布的AI瀏覽器,市場(chǎng)為何反應(yīng)強(qiáng)烈?
-

馬云重返一線督戰(zhàn),阿里重啟創(chuàng)始人模式
-

機(jī)器人奧運(yùn)會(huì)戰(zhàn)報(bào):宇樹機(jī)器人摘下首金,天工Ultra搶走首位“百米飛人”
-

存儲(chǔ)圈掐架!江波龍起訴佰維,索賠121萬
-

長安汽車母公司突然更名:從“中國長安”到“辰致科技”
-

豆包前負(fù)責(zé)人喬木出軌BP后續(xù):均被辭退
-

字節(jié)AI Lab負(fù)責(zé)人李航卸任后返聘,Seed進(jìn)入調(diào)整期
最新活動(dòng)更多
-
6月30日立即申請(qǐng)?jiān)囉?> 【免費(fèi)試用】旭之源工業(yè)電源一一機(jī)器人的穩(wěn)定“心臟“
-
精彩回顧立即查看>> 【限時(shí)免費(fèi)】物理場(chǎng)仿真助力生物醫(yī)學(xué)領(lǐng)域技術(shù)創(chuàng)新
-
精彩回顧立即查看>> 【直播】 智測(cè)未來·2026海克斯康春季產(chǎn)品創(chuàng)新日
-
精彩回顧立即查看>> 【線下論壇】新唐科技×芯唐南京 2026 年度研討會(huì)
-
精彩回顧立即查看>> OFweek 2026(第十五屆)中國機(jī)器人產(chǎn)業(yè)大會(huì)
-
精彩回顧立即查看>> 維科杯· OFweek 2025中國機(jī)器人行業(yè)年度評(píng)選
推薦專題
-
2 華為,重大突破!
- 1 人形機(jī)器人“第一股”來了!宇樹科技即將上會(huì)
- 2 全球股市陷AI獨(dú)大結(jié)構(gòu)性瘋狂
- 3 AI狂歡遇上油價(jià)破百,全球股市還能漲多久? | 產(chǎn)聯(lián)看全球
- 4 DeepSeek融資500億,梁文鋒難逃資本局
- 5 谷歌2026 I/O大會(huì)完整回顧:模型依然重要,但智能體正在接管一切
- 6 全球資本,重倉中國機(jī)器人
- 7 Figure AI 交付突破350臺(tái),陪跑特斯拉會(huì)迎來iPhone 時(shí)刻嗎?
- 8 Anthropic發(fā)布2028年全球AI領(lǐng)導(dǎo)力的兩種情景報(bào)告
- 9 “國產(chǎn)GPU第一股”摩爾線程首季扭虧,但造血能力仍待考驗(yàn)
- 10 特斯拉宣布監(jiān)督版FSD登陸中國?
- 高級(jí)軟件工程師 廣東省/深圳市
- 自動(dòng)化高級(jí)工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)(光器件) 北京市/海淀區(qū)
- 激光器高級(jí)銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市


分享





