人工智慧竟也能編舞?!只要給音樂就能生成對應舞蹈!!(下)

人工智慧真的太厲害了!竟然只要給音樂就能生成對應舞蹈呢!(下)

 

本文為下篇,上篇請看此連結

 

定性結果

如下圖所示,和先前 DanceNet(左)與 Li et. al.(中)相較之下,使用 FACT 模型(右)生成的 3D 舞蹈會更逼真,並且與音樂的相關性更好。

 

choreographi-ai-comparison-animation-7.gif

 

使用 FACT 人工智慧模型生成更多 3D 舞蹈:

image-8.gifimage-9.gif

image-10.gifimage-11.gif

 

人工智慧發展下一步:為每首歌生成逼真舞蹈

Google 開發了一個人工智慧模型,可以學習音頻與動作對應的關係,還可以基於音樂,生成的高質量 3D 動作序列。由於從音樂生成 3D 動作是一個新興的研究領域,Google 希望可以透過此項研究成果能為未來跨模組「音頻-3D 動作」的生成鋪道。

 

藉由這項研究,Google 還發布了迄今為止最大的 3D 人類舞蹈資料庫「AIST++——具有多視角、多種舞蹈形式、跨模態的 3D 動作數據集,不僅對 3D 動作生成研究有幫助,一般來說,也對人類理解研究有極大的幫助。Google 將在 GitHub 中發布代碼,並在此處發布經過訓練的模型。

 

雖然此項結果給了這個「基於音樂來生成 3D 動作」的議題一個有希望的方向,但是還是有更多的東西仍需要探索:像是Google 所使用的方法是基於運動學的、並沒有將舞者和地板間的身體互動考慮進去。因此,如果進行全局平移的話,會導致如腳滑動和浮動的假影。因此,接下來的方向是要探索如何為每首音樂來生成多個逼真的舞蹈。

 

 

 

推薦閱讀:
油價漲免驚!Google Maps 用人工智慧規劃「最省油路線」


人類又輸了?工程師需花數月設計出IC晶片,AI六小時就搞定!


人工智慧幫你診斷皮膚疾病!Google AI鏡頭變身皮膚科幫手


生物學最大謎團被人工智慧 破解!DeepMind 攻克「蛋白質折疊」奧秘


人工智慧醫療檢測準確率超高!大幅降低大腸癌發生率!


以色列戰隊致勝關鍵,竟是將人工智慧用在軍事領域?!(上)


7人工智慧編程工具Codex神助攻!讓你寫程式真輕鬆!(上)

arrow
arrow

    jimchen19901212 發表在 痞客邦 留言(0) 人氣()