音樂筆記主要的做的是以技術(shù)驅(qū)動(dòng)的在線鋼琴服務(wù)。

音樂筆記CEO閆文聞:用AI重構(gòu)鋼琴教學(xué)場(chǎng)景

2017-12-17 17:02:07發(fā)布     來源:多知網(wǎng)    作者:Alice  

  ?多知網(wǎng)12月16日,在2017ACE素質(zhì)教育行業(yè)峰會(huì)上,音樂筆記的創(chuàng)始人兼CEO閆文聞分享了在人工智能技術(shù)下,鋼琴陪練機(jī)器人和共享教室的實(shí)際運(yùn)用情況。

  以下為閆文聞的分享內(nèi)容,經(jīng)多知網(wǎng)整理:

  音樂筆記主要的做的是以技術(shù)驅(qū)動(dòng)的在線鋼琴服務(wù)。

  我們是一個(gè)從技術(shù)領(lǐng)域去切入到音樂教育的典型公司,主要邏輯是將人工智能技術(shù)與真人的服務(wù)相結(jié)合,把機(jī)器人或傳感器放到一個(gè)特定的垂直的應(yīng)用場(chǎng)景里面,讓其替人去做最基礎(chǔ)的判斷,達(dá)到高度整合數(shù)據(jù),提高人的工作效率的目的。

  音視頻算法的本質(zhì)功能,即瞬間對(duì)用戶行為進(jìn)行判斷與反應(yīng),包括在毫秒內(nèi)判斷用戶觸鍵鍵位、按鍵時(shí)長(zhǎng)甚至進(jìn)行單音的識(shí)別等等。

  在鋼琴學(xué)習(xí)“找錯(cuò)”或“標(biāo)記”這件事上,機(jī)器現(xiàn)在已經(jīng)比人做的好。

  機(jī)器在平均1.5-2秒之內(nèi)將自動(dòng)建立一個(gè)模型,對(duì)鍵盤的每一個(gè)鍵、每一個(gè)位置進(jìn)行精準(zhǔn)切割。通過自動(dòng)化的標(biāo)記、自動(dòng)化的判斷,機(jī)器會(huì)自動(dòng)產(chǎn)生的決策。同時(shí)機(jī)器通過先前的感知與決策來判斷演奏的對(duì)錯(cuò)和演奏的情況,直接反饋到通俗易懂,能被使用者理解的曲譜的譜面上。比如紅色的是音準(zhǔn)的錯(cuò)誤,黃色是結(jié)構(gòu)的錯(cuò)誤,基本上可以細(xì)化的標(biāo)注到每一個(gè)音符。同時(shí),演奏的音視頻內(nèi)容對(duì)應(yīng)到每一個(gè)小節(jié)、每一次觸鍵,都由算法做好了精確的切割。所有演奏的音示范的曲譜都可以精準(zhǔn)的演奏音視頻,是最基礎(chǔ)的升級(jí)版的DVD。

  當(dāng)一個(gè)孩子日常的練習(xí)曲子,平均在20秒或者是一兩分鐘。沒有人能夠去一直盯著孩子,關(guān)注孩子演奏的狀態(tài)。

  在行業(yè)里,重復(fù)性的勞動(dòng)首先應(yīng)該交給機(jī)器,機(jī)器不會(huì)介意做最瑣碎的臟活累活,并且現(xiàn)在機(jī)器做這類型的工作比人更得心應(yīng)手。

  音樂筆記后臺(tái)有300多萬條演奏音視頻的數(shù)據(jù),樣本也是通過300多萬條的標(biāo)注去實(shí)現(xiàn)的,目前識(shí)別精度超過了99.5%以上。

  基于核心技術(shù),我們有最直接的硬件產(chǎn)品——陪練機(jī)器人,陪練機(jī)器人最主要是對(duì)音準(zhǔn)和節(jié)奏的實(shí)時(shí)的反饋、對(duì)錯(cuò)的反饋,精度達(dá)到了99.5%以上。

  陪練機(jī)器人產(chǎn)品,可以為整個(gè)行業(yè)提供最基礎(chǔ)的功能,可以讓任意鋼琴,包括電鋼琴、原生鋼琴,變成智能鋼琴。

  教鋼琴和教K12的其他的學(xué)科不一樣的,鋼琴教學(xué)要同時(shí)看到孩子的臉和手、鍵盤。做遠(yuǎn)程教學(xué)時(shí),鋼琴教室對(duì)傳輸?shù)囊蟾?,?duì)音色、聲音還原有更高級(jí)別的需求。

  基于同樣的硬件,我們又有了在線教室,可以讓任何一臺(tái)琴瞬間可以上網(wǎng)。

  音樂筆記的在線直播的鋼琴課,有三個(gè)主要的元素,真人老師、機(jī)器人的老師、直播的在線教室。

  課程產(chǎn)品主要是兩種,第一是四對(duì)一的陪練產(chǎn)品,第二是和中國(guó)人保一起推出的“考級(jí)效果保險(xiǎn)”。

  “四對(duì)一”是四個(gè)老師對(duì)一個(gè)學(xué)生,四個(gè)老師包括授課老師、班主任老師, 7×24小時(shí)陪孩子的機(jī)器人老師,還有通過互聯(lián)網(wǎng)、直播教室去聯(lián)系到全球的名師。

  在陪練課程服務(wù)里面,能夠通過機(jī)器人的輔助以及人的參與,全程將孩子練琴這件事的數(shù)據(jù)采集上來,并透明化、實(shí)時(shí)的給家長(zhǎng)進(jìn)行傳遞。因?yàn)橛腥痰暮⒆拥木毩?xí)數(shù)據(jù),所以我們也很榮幸的跟中國(guó)人保去推出基于數(shù)據(jù)的效果險(xiǎn)。如果平時(shí)對(duì)著機(jī)器練習(xí)效果不錯(cuò),但是考試沒有發(fā)揮好,人保會(huì)賠償全額學(xué)費(fèi)。

  我們覺得技術(shù)應(yīng)該是開放的。最近,珠江鋼琴做了云學(xué)堂的發(fā)布會(huì),也是圍繞我們這套核心的技術(shù)和核心產(chǎn)品建立起來的,我們也希望通過和珠江的合作方式,能推介給整個(gè)行業(yè),用AI技術(shù)賦能整個(gè)行業(yè)的互聯(lián)網(wǎng)化發(fā)展。

  合作方式非常直接,第一,在線教室,通過把一部分課程改到晚上,減輕琴房的負(fù)擔(dān)。第二,陪練機(jī)器人,與大家合作做機(jī)器陪練課,商業(yè)模式會(huì)更優(yōu)一些。