業(yè)內(nèi)專(zhuān)業(yè)AI公司發(fā)布全新的重慶3D動(dòng)畫(huà)制作技術(shù)
人工智能平臺(tái)公司云從科技近日發(fā)布了其在3D人體重建技術(shù)上取得的重大突破。3月19日，作為“國(guó)內(nèi)CV（計(jì)算機(jī)視覺(jué)）四小龍”之一的云從科技（以下簡(jiǎn)稱(chēng)云從）宣布，重慶影視公司其基于單幀圖像的3D人體重建技術(shù)刷新了三項(xiàng)世界紀(jì)錄，這也是繼去年云從在3D人臉數(shù)據(jù)集上大幅刷新紀(jì)錄后，再次在此類(lèi)3D重建技術(shù)上取得重要成果。
所謂的三項(xiàng)世界紀(jì)錄，指的是Human3.6M、Surreal和UP-3D三個(gè)數(shù)據(jù)集，是全球關(guān)于3D人體重建技術(shù)的權(quán)威數(shù)據(jù)集。榜單中的競(jìng)爭(zhēng)對(duì)手包括加州大學(xué)伯克利分校、賓夕法尼亞大學(xué)、Amazon和Adobe Research等知名企業(yè)、研究所與高校。
那么，這項(xiàng)“牛逼”的AI技術(shù)到底有哪些應(yīng)用呢？對(duì)于大眾而言，3D人體重建技術(shù)帶來(lái)的是全新體驗(yàn)：
這意味著，只用美顏APP就可以完成高精度的全身“瘦身”；你站在鏡子前，商場(chǎng)的試衣鏡便可實(shí)現(xiàn)一秒換裝；如果放在電影工業(yè)的范疇來(lái)看，全新的3D人體重建技術(shù)，甚至將超越今年熱映好萊塢科幻大片《阿麗塔》中所使用的視覺(jué)特效水平（鈦媒體曾對(duì)該片的特效技術(shù)有詳細(xì)介紹）。
在3D重建領(lǐng)域，重慶影視制作在的差通常被作為算法能力的主要衡量指標(biāo)，它指的是生成模型與實(shí)際圖像的差別。一般來(lái)說(shuō)誤差越低，精度越高，技術(shù)的性能越好。
云從對(duì)鈦媒體透露，此次技術(shù)突破，“將原有最低誤差記錄大幅降低30%，使3D人體建模的結(jié)果更優(yōu)秀，更接近人體的實(shí)際情況”。以下為云從提供的最低誤差記錄的信息：
全身精度誤差在Surreal上從75.4毫米降低到52.7毫米；關(guān)節(jié)精度誤差從55.8毫米降低到40.1毫米；Human3.6M上的關(guān)節(jié)精度誤差從59.9毫米降低到46.7毫米；
除了誤差指標(biāo)，流暢度也是評(píng)價(jià)技術(shù)效果的關(guān)鍵指標(biāo)。據(jù)云從透露，當(dāng)前人體模型的幀率已經(jīng)達(dá)到了200幀/每秒，相較之下，電影的幀率通常只有24幀/秒，即使對(duì)流暢度要求很高的電子游戲，達(dá)到60幀/秒就已經(jīng)非常流暢。在運(yùn)算速度上，人體建模的耗時(shí)也從上百毫秒降低到5毫秒，建模效率更高。
關(guān)鍵指標(biāo)取得重大突破，加速了3D人體重建的落地進(jìn)程，但這一概念在大眾眼中實(shí)屬陌生。重慶3D動(dòng)畫(huà)公司他們所提出的單幀3D人體重建到底是什么？其革命性到底體現(xiàn)在哪里？
2D向3D飛躍：更精細(xì)的人體重建
因?yàn)槿梭w有豐富的姿態(tài)和穿著，云從提出了一套全新的基于人體3D縱深預(yù)測(cè)的3D信息表征方式。該重慶3D動(dòng)畫(huà)制作技術(shù)通過(guò)對(duì)三原色圖像（RGB，不含深度信息）進(jìn)行分析，預(yù)測(cè)人體的3D形態(tài)和姿勢(shì)。
這是3D人體重建從2D時(shí)代向3D時(shí)代的飛躍。
傳統(tǒng)的人體關(guān)鍵點(diǎn)檢測(cè)技術(shù)往往監(jiān)測(cè)的是2D的人體骨骼關(guān)節(jié)點(diǎn)，即通過(guò)技術(shù)預(yù)測(cè)RGB圖像中人體的十幾個(gè)關(guān)節(jié)點(diǎn)的坐標(biāo)。這種方式存在著不足，其一這樣捕捉的節(jié)點(diǎn)非常稀疏；其二，這樣捕捉的結(jié)果一般只包含2D平面的坐標(biāo)預(yù)測(cè)，不能還原3D的深度信息，無(wú)法體現(xiàn)縱深感。
而基于單幀圖像的3D重建技術(shù)不僅能輸出骨骼關(guān)節(jié)點(diǎn)信息，更能同時(shí)預(yù)測(cè)大量人體表面的關(guān)鍵點(diǎn)信息，使預(yù)測(cè)結(jié)果更豐富。而且每個(gè)點(diǎn)的坐標(biāo)都是3D呈現(xiàn)，能夠體現(xiàn)不同軀干的縱深信息。
