NovelEffect用語音識別技術(shù)講故事 讓睡前故事隨著情節(jié)變化精彩紛呈
NovelEffect是一款親子閱讀App,它運用了語音識別技術(shù),在爸媽給孩子們講故事時,將朗讀出來的文字與影視主題音樂、音效、動畫等同步,讓睡前故事隨著情節(jié)變化精彩紛呈,如同魔幻電影一般。
有一天,我正在為女兒朗讀英文繪本《好餓的毛毛蟲》(TheVeryHungryCaterpillar)。當(dāng)讀到毛毛蟲吃掉一個蘋果的時候,我停了下來,因為我聽到咖啡桌那邊傳來了明顯的咀嚼聲。這種聲音實際上是由這款應(yīng)用程序發(fā)出的,它根據(jù)使用者正在朗讀的故事文本,通過語音識別技術(shù),根據(jù)朗讀者正在朗讀的內(nèi)容播放各種聲音效果和音樂作為背景音樂,讓家里及課堂的朗讀體驗對于孩子來說變得更有吸引力。
打開NovelEffect應(yīng)用程序,并在系統(tǒng)設(shè)置內(nèi)打開麥克風(fēng),你會看到書架上放滿了有趣的故事書。使用NovelEffect,你需要在應(yīng)用中打開特定能匹配現(xiàn)實生活的書,這能使得應(yīng)用程序開始“傾聽”這本書的文本,并且分析朗讀者的言語來找出故事當(dāng)時所處的文本,最后同步播放各種匹配的背景音樂,從肚子疼的呻吟到馬兒的嘶鳴聲。它不需要使用者從故事的開頭一直讀到結(jié)尾,甚至可以在第10頁或者前后幾頁開始朗讀。同時,不管使用者在同一頁上停留多久,抑或是在朗讀的過程中被打斷去談?wù)摃疽酝獾氖挛?,都不會對?yīng)用產(chǎn)生影響。
孩子們都是好奇的小天使,會在讀故事的過程中頻頻打斷,問出各種奇妙的問題。而此時NovelEffect正在播放,手機還屏幕朝下放在桌上,這就尷尬了,家長是應(yīng)該不顧孩子的疑問繼續(xù)跟著配樂讀故事,還是停下來回答問題,然后手忙腳亂地把故事配樂倒過來重播一遍?
孩子提出問題,這是應(yīng)該被鼓勵的。有故事情節(jié),有提問,有思考,有回答,一本好的兒童故事書才能體現(xiàn)它在親子教育中的作用。盡管停下來去滿足孩子們的好奇心吧,NovelEffect也會緊跟著爸媽朗讀的內(nèi)容,停下來耐心等待。在一定時間內(nèi),應(yīng)用程序識別不到書中的文字,便會停下,而一旦說完與故事無關(guān)的語句,只要再次大聲朗讀接下來的文字內(nèi)容,NovelEffect即可精準(zhǔn)識別段落情節(jié),將故事繼續(xù)下去。針對這一點,該應(yīng)用在配樂、特效設(shè)置以及語音識別的技術(shù)調(diào)整上獨具匠心,朗讀者只需幾個關(guān)鍵詞,配樂便可以識別相關(guān)情節(jié)并播放。有了這樣的設(shè)計,想從上次沒讀完的地方繼續(xù),或者是重新讀一遍有趣的情節(jié),都不需要用戶在App內(nèi)做任何的設(shè)置,系統(tǒng)會自動實現(xiàn)跳轉(zhuǎn)。
對于“哄睡困難戶”的孩子們,NovelEffect推出了“哄睡故事”系列,在經(jīng)過設(shè)置后,故事配樂會逐漸變成適合睡覺的白噪音,輕柔地陪伴寶寶進(jìn)入夢鄉(xiāng)。





