時間:2022-02-28|瀏覽:582
如果玩家不穿全套的動作捕捉設(shè)備,他們未來的虛擬形象將有點難在元宇宙中跳舞。其次,對于數(shù)字人制造商來說,制作復(fù)雜而美麗的舞蹈動作也是一個門檻。據(jù)報道,「踏歌」虛擬人舞蹈和音樂解決方案可以為游戲制造商和廣告商提供。
2021年4月21年4月,為舞蹈工作室提供服務(wù)Saas基于踏歌,平臺是踏歌的主營業(yè)務(wù)SaaS平臺,踏歌衍生出超寫實舞蹈數(shù)字人解決方案、舞蹈與音樂領(lǐng)域數(shù)字收藏等業(yè)務(wù)。
SaaS在業(yè)務(wù)方面,舞廳將自制舞蹈課程上傳到踏歌舞云平臺,讓學(xué)生課后使用踏歌APP熱身、復(fù)習(xí)和打卡。另一方面,舞廳的學(xué)生被打開「踏歌APP」,將攝像頭對準(zhǔn)自己,像玩游戲一樣學(xué)習(xí)跳舞,手機攝像頭姿態(tài)識別算法自動識別學(xué)員舞蹈動作,“老師”對其舞蹈進行拆解動作、識別舞風(fēng)、打分、糾錯。
這套動作姿勢識別算法是基于大量的舞蹈動作積累,舞廳老師會穿上我們的動作捕捉設(shè)備,或者去動作捕捉基地錄制舞蹈,據(jù)創(chuàng)始人李迪說,歌曲積累了爵士舞動作姿勢數(shù)據(jù)庫,爵士舞是女性最受歡迎的舞蹈之一。
在技術(shù)上,舞蹈動作復(fù)雜,變化速度快,對視覺算法的處理速度要求高。手機攝像頭姿態(tài)識別算法采用動作捕捉 視覺識別方案采集舞蹈動作。該算法在中等配置手機上實現(xiàn)了20ms在相同的硬件平臺下處理一幀Google ML kit耗時的1/3?;谶@種高效的移動平臺攝像頭姿態(tài)識別算法,踏歌可以衍生出其他游戲方法來增強護城河,比如舞蹈數(shù)字人。
據(jù)李迪介紹,從舞蹈數(shù)字人的應(yīng)用場景來看,數(shù)字人可以從音樂開始MV在舞蹈中,未來的歌曲也可以為游戲開發(fā)者和廣告商提供舞蹈解決方案。制作超現(xiàn)實數(shù)字人模型是一項日益激烈的競爭和勞動密集型業(yè)務(wù)。為了創(chuàng)造特點和深度,歌曲專注于讓超現(xiàn)實數(shù)字人跳最專業(yè)、最流暢的舞蹈?,F(xiàn)在,每個消費品公司都在制作自己的超現(xiàn)實數(shù)字人。如果他們的數(shù)字人已經(jīng)由其他公司完成,但想跳最專業(yè)的舞蹈動作,你可以使用歌曲提供的解決方案。
圍繞舞蹈,李迪還希望自行車歌曲能給舞者帶來持續(xù)的創(chuàng)作者收入。為此,自行車歌曲開發(fā)了一個數(shù)字收藏小程序,將舞者的照片和動作視頻制作成數(shù)字收藏,并限制發(fā)行。同時,自行車歌曲認(rèn)為,在滿足監(jiān)管要求的情況下,數(shù)字收藏平臺應(yīng)該進行更多的業(yè)務(wù)創(chuàng)新。據(jù)報道,自行車歌曲捕捉了短視頻平臺上流行的舞蹈動作,通過自行車數(shù)字收藏平臺向廣告商和游戲開發(fā)者銷售動作文件作為廣告資產(chǎn)和游戲資產(chǎn),相關(guān)細(xì)節(jié)將在不久的將來披露。
李迪向36氪介紹,用一句話來概括踏歌所做的事情,就是在元宇宙中做舞蹈和音樂C端應(yīng)用。短期內(nèi)實現(xiàn)的路徑是通過SaaS平臺鏈接舞室KA從而獲得舞室背后的用戶C終端用戶。未來,踏歌將擴大純度C端業(yè)務(wù),打造面向C舞蹈在線游戲平臺,引入豐富的游戲機制,讓玩家通過手機完成跟隨和跳躍pk、錄制,甚至參與在線迪廳,最終形成全民K網(wǎng)上社區(qū)歌舞。
在銷售擴張方面,踏歌與「SPY舞室」與全國數(shù)百家頭部舞廳建立深度合作關(guān)系。SPY舞廳是中國舞蹈家協(xié)會街舞委員會常務(wù)理事單位,具有示范效果。據(jù)李迪介紹,線下舞蹈學(xué)習(xí)是一項客戶單價高的業(yè)務(wù)。二三線城市頭部舞廳的典型肖像是10~20家連鎖店,年卡客戶單價4萬~8000年收入可達(dá)3-大約5000萬元。舞廳是預(yù)付款的,現(xiàn)金流很好。如果我們通過為中大城市的頭部舞廳服務(wù)KA未來一年,客戶將獲得10萬學(xué)生,每個學(xué)生平均貢獻(xiàn)200元,年收入2000萬。
踏歌項目始于2020年,創(chuàng)始人李迪貢獻(xiàn)了計算機視覺算法、姿態(tài)匹配算法、SaaS大多數(shù)早期技術(shù)代碼,如平臺、游戲客戶端開發(fā)、超現(xiàn)實數(shù)字人區(qū)塊鏈平臺等。目前,踏歌APP1.0版和踏歌數(shù)字收藏小程序已在種子用戶中內(nèi)測,即將上線。
來自騰訊的踏歌創(chuàng)始團隊,F(xiàn)acebook(Meta)、百度、平安科技、華納音樂、協(xié)和醫(yī)院擁有眾多專業(yè)舞者和頂級音樂家。創(chuàng)始人李迪是北京郵電大學(xué)人工智能學(xué)院的碩士學(xué)位,曾在字節(jié)跳動和騰訊工作過NLP和CV算法和工程工作的各個方面;CV算法負(fù)責(zé)人為中國科學(xué)院計算機視覺方向碩士,平安科技智能視覺部高級算法工程師,主要負(fù)責(zé)計算機視覺方向的深度培養(yǎng);VR前蘋果(硅谷)公司光學(xué)模塊工程師是羅切斯特大學(xué)光學(xué)碩士的平臺負(fù)責(zé)人Meta Oculus 工程師,負(fù)責(zé)Oculus Quest等VR開發(fā)制造產(chǎn)品的光學(xué)零部件和模塊供應(yīng)鏈端,負(fù)責(zé)踏歌項目VR 整合硬件和線下跳舞機硬件方案;音樂產(chǎn)品負(fù)責(zé)人Lizzy亞洲第一女DJ。
熱點:元宇宙 區(qū)塊鏈 數(shù)據(jù) 計算機