近日，蘋果機器學習研究團隊發布博文，展示了全新的生成式AI技術——HUGS，能夠在30分鐘內分析短視頻，然后映射創建新的動作和角度。這項技術的推出，標志著蘋果在AI領域取得了新的突破。
HUGS的全稱叫作Human Gaussian Splats，使用機器學習和計算機視覺技術，在原始輸入數據較少的情況下，創建出逼真的人像元素。這項技術利用3D Gaussian Splatting的技術，在場景中創建可移動的人類。
蘋果官方介紹中表示，神經渲染技術目前已經有了長足的進步，但最適合的場景依然是靜態場景的攝影測量，還無法推廣到環境中自由移動的人類。而HUGS技術可以解決這一問題，使得神經渲染技術在動態場景中的應用更加廣泛。
HUGS技術本身需要少量的主體視頻，通常在場景中運動，并顯示盡可能多的表面供系統工作。在某些情況下，該技術對源輸入數據的要求很低，最少可以低至50到100幀的單目視頻，相當于2到4秒的24fps視頻。這意味著即使只有少量的視頻數據，HUGS也能夠創建出逼真的人像元素。
蘋果聲稱，該系統已經過訓練，可以“在30分鐘內解開靜態場景和完全可動畫化的人類化身”。這一速度比其他方法快100倍，使得HUGS技術在動畫制作、游戲設計、虛擬現實等領域具有廣泛的應用前景。
蘋果表示，SMPL體模型雖然用于初始化人類高斯模型，但無法捕獲每個細節。對于未建模的元素（如布料和頭發），該過程可以偏離SMPL模型，來填補模型捕獲中的空白。這一技術的推出，使得蘋果在人體建模和動畫制作方面取得了重大突破。
總的來說，蘋果發布的全新生成式AI技術HUGS是一項具有劃時代意義的技術創新。它利用機器學習和計算機視覺技術，在原始輸入數據較少的情況下，創建出逼真的人像元素。這一技術的推出將為動畫制作、游戲設計、虛擬現實等領域帶來革命性的變革。未來，我們有理由相信蘋果將在AI領域取得更多的突破和創新。
原創文章，作者：秋秋，如若轉載，請注明出處：http://www.bdzhitong.com/article/609004.html
