依托中科匯聯(lián)自主研發(fā)的畫捕和動(dòng)捕系統(tǒng),快速采集校園形象人物,完成高逼真數(shù)字化重建。在設(shè)計(jì)上,提供3D超寫實(shí)、3D寫實(shí)、3D半寫實(shí)、2D真人、卡通五種風(fēng)格的數(shù)智助教形象,滿足多樣化教學(xué)場(chǎng)景需求。同時(shí),支持深度定制化,從面部表情到肢體動(dòng)作,全方位打造貼合學(xué)校特色的專屬數(shù)字人助教形象。
??在教育數(shù)字化轉(zhuǎn)型的浪潮中,中科匯聯(lián)智慧數(shù)字人助教解決方案深度融合大模型與智能體技術(shù),致力于打造個(gè)性化、高效能的教與學(xué)新生態(tài)。通過大模型強(qiáng)大的自然語言處理與知識(shí)理解能力,結(jié)合智能體的自主決策和靈活交互特性,數(shù)字人助教不僅能實(shí)現(xiàn)教學(xué)過程中的流暢音視頻交互,還能精準(zhǔn)匹配每個(gè)學(xué)生的學(xué)習(xí)節(jié)奏,提供定制化的教學(xué)進(jìn)度規(guī)劃,全面提升教育教學(xué)的效率與質(zhì)量。
??在課堂場(chǎng)景中,數(shù)字人助教作為老師的得力助手,具備多元功能。它可以通過聲音控制與實(shí)體按鍵相結(jié)合的方式,輕松管理教室內(nèi)的設(shè)備開關(guān);利用掃碼考勤和視頻分析技術(shù),準(zhǔn)確完成學(xué)生考勤工作。面對(duì)課堂紀(jì)律問題,如學(xué)生睡覺、玩手機(jī)等情況,數(shù)字人助教能夠借助先進(jìn)的學(xué)生身份識(shí)別技術(shù),及時(shí)發(fā)現(xiàn)并匯總問題,悄無聲息地反饋給當(dāng)事學(xué)生,避免打斷老師和其他同學(xué)的思路,維護(hù)課堂的良好秩序。
1
教學(xué)助教形象
依托中科匯聯(lián)自主研發(fā)的畫捕和動(dòng)捕系統(tǒng),快速采集校園形象人物,完成高逼真數(shù)字化重建。在設(shè)計(jì)上,提供3D超寫實(shí)、3D寫實(shí)、3D半寫實(shí)、2D真人、卡通五種風(fēng)格的數(shù)智助教形象,滿足多樣化教學(xué)場(chǎng)景需求。同時(shí),支持深度定制化,從面部表情到肢體動(dòng)作,全方位打造貼合學(xué)校特色的專屬數(shù)字人助教形象。
2
純熟的AI引擎
數(shù)字人助教的核心是大模型與虛擬現(xiàn)實(shí)技術(shù)的深度融合。借助先進(jìn)的ASR語音識(shí)別技術(shù),精準(zhǔn)識(shí)別師生的語音指令;NLP語義分析與理解技術(shù),深入剖析語言背后的意圖;TTS語音合成技術(shù),輸出自然流暢的語音回復(fù)。再結(jié)合AIMeta數(shù)字人交互系統(tǒng),構(gòu)建起虛擬人大腦。大模型的引入,使其擁有更廣泛的知識(shí)儲(chǔ)備和更強(qiáng)大的知識(shí)推理能力,能夠在知識(shí)圖譜的輔助下,為學(xué)生提供更具深度和廣度的個(gè)性化教學(xué)服務(wù)。
3
智能知識(shí)圖譜
中科匯聯(lián)精心打造的專業(yè)知識(shí)圖譜庫(kù),如同一個(gè)龐大的知識(shí)中樞。它能夠?qū)φn堂錄制的高清視音頻進(jìn)行精準(zhǔn)切割,轉(zhuǎn)化為3-5分鐘的知識(shí)點(diǎn)微課。學(xué)生可以通過知識(shí)點(diǎn)搜索、筆記搜索、手機(jī)拍照搜索、時(shí)間模糊搜索等多種方式,快速定位所需學(xué)習(xí)內(nèi)容。大模型與知識(shí)圖譜的協(xié)同工作,進(jìn)一步優(yōu)化搜索結(jié)果,提供更精準(zhǔn)、更具關(guān)聯(lián)性的知識(shí)推薦,有效提升教學(xué)質(zhì)量和學(xué)習(xí)效率。
4
教學(xué)場(chǎng)景深度學(xué)習(xí)
數(shù)字人助教運(yùn)用臉關(guān)鍵點(diǎn)檢測(cè)、人臉特征提取等技術(shù),結(jié)合教育教學(xué)音視頻記錄等多模態(tài)信息,借助大模型的強(qiáng)大學(xué)習(xí)能力,在AI深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)的基礎(chǔ)上,融合圖像識(shí)別、語音識(shí)別、自然語言處理技術(shù)。經(jīng)過海量數(shù)據(jù)的建模訓(xùn)練和持續(xù)的模型迭代,不斷優(yōu)化教學(xué)場(chǎng)景理解和交互策略,充分發(fā)揮教學(xué)助教的價(jià)值,為師生提供更優(yōu)質(zhì)的教學(xué)支持。
5
沉浸式交互體驗(yàn)
借助大模型的語言生成能力和智能知識(shí)庫(kù),數(shù)字人助教將教學(xué)場(chǎng)景與話術(shù)動(dòng)作完美融合。在對(duì)話過程中,它思維敏捷、邏輯嚴(yán)謹(jǐn)、對(duì)話流暢,能夠根據(jù)師生的反饋實(shí)時(shí)調(diào)整交互策略,營(yíng)造出身臨其境的沉浸式交互體驗(yàn),增強(qiáng)師生與數(shù)字人助教之間的互動(dòng)粘性。
6
多終端展現(xiàn)
為滿足不同教學(xué)場(chǎng)景的使用需求,數(shù)字人助教提供標(biāo)準(zhǔn)化API接口,支持與第三方平臺(tái)無縫對(duì)接。無論是教學(xué)大屏、電腦,還是手機(jī)、平板等終端設(shè)備,都能自動(dòng)適配,確保師生在任何場(chǎng)景下都能便捷地使用數(shù)字人助教服務(wù)。
依托中科匯聯(lián)自主研發(fā)的畫捕和動(dòng)捕系統(tǒng),快速采集校園形象人物,完成高逼真數(shù)字化重建。在設(shè)計(jì)上,提供3D超寫實(shí)、3D寫實(shí)、3D半寫實(shí)、2D真人、卡通五種風(fēng)格的數(shù)智助教形象,滿足多樣化教學(xué)場(chǎng)景需求。同時(shí),支持深度定制化,從面部表情到肢體動(dòng)作,全方位打造貼合學(xué)校特色的專屬數(shù)字人助教形象。
特色肖像
支持多種豐富的人臉表情,同時(shí)擁有2D/3D虛擬形象可供選擇??筛鶕?jù)不同學(xué)校的文化特色、教學(xué)風(fēng)格以及學(xué)生喜好,定制獨(dú)一無二的真人形象,增強(qiáng)學(xué)生對(duì)數(shù)字人助教的認(rèn)同感和親近感。
特色服飾
教學(xué)數(shù)字人助教提供全方位的個(gè)性化虛擬形象定制服務(wù),包括背景、形象配飾、服裝等。通過定制符合教學(xué)主題和場(chǎng)景的形象元素,營(yíng)造更加貼合教學(xué)內(nèi)容的學(xué)習(xí)氛圍,提升學(xué)生的學(xué)習(xí)體驗(yàn)。
學(xué)情分析
通過無感知的數(shù)據(jù)采集,每隔5分鐘抓拍學(xué)生考勤、表情和行為數(shù)據(jù),實(shí)時(shí)統(tǒng)計(jì)抬頭率。同時(shí),識(shí)別教師的教學(xué)行為,如講課、板書、走動(dòng)等,生成講臺(tái)占位率數(shù)據(jù)。利用大模型的數(shù)據(jù)分析能力,深度挖掘數(shù)據(jù)價(jià)值,為教學(xué)改進(jìn)提供有力依據(jù)。
智慧服務(wù)
在與師生互動(dòng)過程中,數(shù)字人助教借助意圖識(shí)別引擎,精準(zhǔn)拆解和理解師生意圖。依托大模型的知識(shí)儲(chǔ)備和語言生成能力,針對(duì)各種問題提供智能、準(zhǔn)確的應(yīng)答,為教學(xué)過程提供及時(shí)有效的支持。