編舞老師不是人?!人工智慧"FACT"有音樂就能編舞蹈!(下)

編舞老師不是人?!人工智慧"FACT"有音樂就能編舞蹈!(下)

你能想像編舞老師是人工智慧嗎?它只要有音樂就能生成對應舞蹈呢!(下)


本文為下篇,上篇請看此連結


定性結果

如下圖所示,和先前 DanceNet(左)與 Li et. al.(中)相較之下,使用 FACT 模型(右)生成的 3D 舞蹈會更逼真,並且與音樂的相關性更好。

 


使用 FACT 人工智慧模型生成更多 3D 舞蹈:







人工智慧發展下一步:為每首歌生成逼真舞蹈

Google 開發了一個人工智慧模型,可以學習音頻與動作對應的關係,還可以基於音樂,生成的高質量 3D 動作序列。由於從音樂生成 3D 動作是一個新興的研究領域,Google 希望可以透過此項研究成果能為未來跨模組「音頻-3D 動作」的生成鋪道。

 

藉由這項研究,Google 還發布了迄今為止最大的 3D 人類舞蹈資料庫「AIST++——具有多視角、多種舞蹈形式、跨模態的 3D 動作數據集,不僅對 3D 動作生成研究有幫助,一般來說,也對人類理解研究有極大的幫助。Google 將在 GitHub 中發布代碼,並在此處發布經過訓練的模型。

 

雖然此項結果給了這個「基於音樂來生成 3D 動作」的議題一個有希望的方向,但是還是有更多的東西仍需要探索:像是Google 所使用的方法是基於運動學的、並沒有將舞者和地板間的身體互動考慮進去。因此,如果進行全局平移的話,會導致如腳滑動和浮動的假影。因此,接下來的方向是要探索如何為每首音樂來生成多個逼真的舞蹈。

 

 

 

更多閱讀:

油價漲免驚!Google Maps 用人工智慧規劃「最省油路線」


人類又輸了?工程師需花數月設計出IC晶片,AI六小時就搞定!


人工智慧幫你診斷皮膚疾病!Google AI鏡頭變身皮膚科幫手


生物學最大謎團被人工智慧 破解!DeepMind 攻克「蛋白質折疊」奧秘


人工智慧編程工具Codex,讓你會講英文就能寫程式!(上)


防堵洗錢有妙招!人工智慧為你金融資安把關!(上)


以色列戰隊藉助人工智慧,軍事戰力大升級!(上)



熱門文章