在近日舉辦的2025云棲大會(huì)現(xiàn)場(chǎng)，無(wú)界方舟推出的國(guó)內(nèi)首款基于「端到端實(shí)時(shí)多模態(tài)互動(dòng)模型」的AI學(xué)伴機(jī)器人——奇多多，成為全場(chǎng)焦點(diǎn)。這款產(chǎn)品在京東預(yù)售僅上線一周，銷(xiāo)量便突破了10000臺(tái)，這個(gè)數(shù)字不僅體現(xiàn)了市場(chǎng)對(duì)優(yōu)質(zhì)AI早教產(chǎn)品的渴望，更預(yù)示著多模態(tài)大模型在消費(fèi)級(jí)硬件領(lǐng)域的商業(yè)化曙光正在到來(lái)。

正如一位現(xiàn)場(chǎng)寶媽所說(shuō)：“太好了！終于不止是AI玩具了，而是解決了很多早教痛點(diǎn)問(wèn)題?！痹贏I技術(shù)日益成熟的今天，奇多多的成功或許驗(yàn)證了：在早教賽道，“功能驅(qū)動(dòng)”比“概念炒作”更能讓市場(chǎng)買(mǎi)單。更令人矚目的是，奇多多在展會(huì)期間，現(xiàn)場(chǎng)獲得了上百位家長(zhǎng)下單預(yù)定，同時(shí)吸引了幾十家AI產(chǎn)品后續(xù)對(duì)接無(wú)界方舟EVA模型的合作機(jī)會(huì)，成為本屆大會(huì)最具商業(yè)潛力的AI硬件產(chǎn)品。

云棲大會(huì)現(xiàn)場(chǎng)火爆，奇多多展現(xiàn)真實(shí)力

在云棲大會(huì)3號(hào)館·前沿應(yīng)用館奇多多星球展臺(tái)，奇多多吸引了大量參展觀眾及寶寶駐足體驗(yàn)。孩子們手拿繪本、練習(xí)、玩具、繪畫(huà)作品等，與奇多多進(jìn)行自然互動(dòng)，現(xiàn)場(chǎng)氣氛熱烈。

奇多多展現(xiàn)出的不僅僅是語(yǔ)音交互能力，更是真正的多模態(tài)理解能力。它能夠識(shí)別孩子手中的任意繪本/教材/卡片等讀物，無(wú)論中文、英文，甚至兒童讀物復(fù)雜分散的混合排版，都能精準(zhǔn)識(shí)別；它能看懂孩子的現(xiàn)場(chǎng)繪畫(huà)；它能對(duì)日常物品進(jìn)行即時(shí)有趣的科普，將深?yuàn)W的科學(xué)原理，以孩子能夠理解的語(yǔ)言描述，符合孩子“邊看、邊問(wèn)、邊學(xué)”的科學(xué)習(xí)得鏈路。

展會(huì)的三天時(shí)間里，奇多多展示了令人驚嘆的閱讀能力：除了所有書(shū)本都能識(shí)別外，還提供了三種閱讀模式：

朗讀模式：可識(shí)別所有類(lèi)型的讀物、多種主流語(yǔ)言文字，語(yǔ)音富有表現(xiàn)力，避免機(jī)械感；

翻譯模式：支持多語(yǔ)言即時(shí)互譯，讀一句英文、翻譯一句中文，讓孩子有興趣閱讀全英文材料；

指讀模式：文字、單詞、圖案均可識(shí)別，并給出相關(guān)科普，替代傳統(tǒng)點(diǎn)讀筆、詞典筆。

“這意味著家長(zhǎng)不再需要購(gòu)買(mǎi)點(diǎn)讀筆、詞典筆、故事機(jī)等多種產(chǎn)品?！币晃滑F(xiàn)場(chǎng)寶爸評(píng)價(jià)，“一機(jī)解決所有閱讀需求，能幫助孩子讀課本，和學(xué)校課業(yè)結(jié)合，這才是真正的解決剛需。”

“與傳統(tǒng)AI產(chǎn)品的交互不同，奇多多不需要按壓拍照或按壓對(duì)話，也不需要等待漫長(zhǎng)的響應(yīng)時(shí)間導(dǎo)致注意力轉(zhuǎn)移?！睙o(wú)界方舟CPO楊冬蘊(yùn)（小喬）在現(xiàn)場(chǎng)介紹，“孩子們可以更自然地邊看、邊問(wèn)、邊學(xué)，這是符合兒童認(rèn)知行為的革命性突破。”

突破性功能：從“AI陪伴”到“功能滿足”的質(zhì)變

預(yù)售破萬(wàn)，奇多多究竟做對(duì)了什么？

小喬表示：“首先非常感謝廣大用戶對(duì)奇多多的喜愛(ài)和認(rèn)可。奇多多的突破主要在于兩方面：一方面是回歸第一性原理，對(duì)早教產(chǎn)品功能做深度挖掘；另一方面是我們自研的EVA實(shí)時(shí)多模態(tài)互動(dòng)模型，能真正滿足產(chǎn)品需求?！?/p>

從國(guó)內(nèi)幾個(gè)主流電商平臺(tái)的退貨率數(shù)據(jù)可知，早教產(chǎn)品退貨率高達(dá)30%-70%。其中退貨率偏低的是故事機(jī)、熏聽(tīng)機(jī)這類(lèi)產(chǎn)品，AI類(lèi)產(chǎn)品的退貨率是非常高的。所以早教硬件看似是紅海賽道，實(shí)際產(chǎn)品力上并沒(méi)有滿足家長(zhǎng)和寶貝們的需求。

奇多多的突破性功能主要體現(xiàn)在三大方面：

1. 能“看”世界的眼睛：AI識(shí)物科普與全能閱讀

無(wú)界方舟創(chuàng)始人&CEO曾曉東博士指出：“常見(jiàn)的「語(yǔ)音AI+CV視覺(jué)模型」在真實(shí)幼齡場(chǎng)景中會(huì)有四重失效，具體表現(xiàn)為，常見(jiàn)的兒童語(yǔ)音識(shí)別錯(cuò)誤率高達(dá)52%、對(duì)任意書(shū)籍的識(shí)別準(zhǔn)確率不足35%、對(duì)常見(jiàn)物品誤識(shí)率超40%、復(fù)雜概念解釋遠(yuǎn)超認(rèn)知水平?！?/p>

EVA通過(guò)“模態(tài)中樞+成長(zhǎng)型認(rèn)知引擎”架構(gòu)實(shí)現(xiàn)突破，從“成人適配”到“兒童友好”，其中視覺(jué)能力為核心支撐：

打通視覺(jué)理解【眼】：兒童“邊看邊問(wèn)”是核心交互習(xí)慣，除AI語(yǔ)音外，奇多多更有視覺(jué)識(shí)別能力，并帶給孩子知識(shí)科普拓展。書(shū)籍、日常物品、涂鴉作品、學(xué)校發(fā)的獎(jiǎng)狀獎(jiǎng)品等，這些孩子喜歡展示和提問(wèn)的物件，奇多多均可識(shí)別。

除AI視覺(jué)識(shí)物和科普外，奇多多還有強(qiáng)大的閱讀能力，支持不同字體、多語(yǔ)言、全類(lèi)型讀物的識(shí)別。寶貝家里的繪本、考卷、課本、期刊、卡片全能識(shí)別和閱讀，提供3種閱讀模式：朗讀、翻譯、指讀，有效替代點(diǎn)讀筆、詞典筆等產(chǎn)品。

2. 堪比真人的低延遲反饋速度

革新延遲標(biāo)準(zhǔn)【快】：語(yǔ)音交互延遲≤250ms（匹配快速注意力轉(zhuǎn)移特性），視頻交互延遲≤400ms，書(shū)籍識(shí)別/實(shí)物識(shí)別延遲≤300ms（采用邊緣端視覺(jué)特征加速算法，支持即時(shí)反饋）。即使受限于硬件設(shè)備性能，也可以控制在秒級(jí)響應(yīng)。

0-10歲兒童的注意力持續(xù)時(shí)間僅為10-30分鐘，超過(guò)1秒的響應(yīng)延遲就會(huì)中斷注意力，而缺乏視覺(jué)理解的實(shí)時(shí)互動(dòng)則會(huì)切斷“從看到學(xué)”的核心鏈路。很多AI語(yǔ)音產(chǎn)品采用按壓式交互，反饋在6秒以上，孩子是無(wú)法沉浸使用的。

“孩子問(wèn)‘這是什么’時(shí)，如果等待超過(guò)1秒，他們的注意力就可能轉(zhuǎn)移。”小喬解釋道，“我們的技術(shù)團(tuán)隊(duì)為此進(jìn)行了大量?jī)?yōu)化，確保交互過(guò)程自然連貫?！?/p>

3. 能“成長(zhǎng)”的個(gè)性化陪伴感

情感與成長(zhǎng)體系【伴】：具備48種情緒計(jì)算體系，100+種眼神表情互動(dòng)，可克隆父母的音色與孩子對(duì)話。更有個(gè)性化記憶引擎帶來(lái)AI成長(zhǎng)體驗(yàn)，使每個(gè)孩子都有專(zhuān)屬于自己的奇多多。

奇多多是帶有成長(zhǎng)屬性的AI產(chǎn)品，會(huì)隨著用戶的使用，個(gè)性化適配用戶，記得用戶的重要事件，讓每個(gè)孩子擁有屬于自己的奇多多。其背后的關(guān)鍵是“存儲(chǔ)型記憶 + 參數(shù)化記憶”的技術(shù)結(jié)合，為寶貝們打造專(zhuān)屬的 “記憶引擎”。

技術(shù)內(nèi)核：EVA大模型如何突破行業(yè)瓶頸

曾曉東博士深入解析了背后的技術(shù)原理：“首先我們需要的是一個(gè)極強(qiáng)的實(shí)時(shí)多模態(tài)大模型來(lái)賦予硬件‘真人般的交互’，多模態(tài)模型因其能夠融合文本、圖像、音頻等多種信息形態(tài)，提供更智能、擬人化的交互，而成為重要研究方向。我們從去年年初就著重布局這個(gè)方向，在業(yè)界沒(méi)有任何現(xiàn)成開(kāi)源方案的情況下，率先在去年8月份推出了國(guó)內(nèi)SOTA的EVA端到端多模態(tài)模型，率先解決了多模態(tài)商業(yè)化致命瓶頸，為AI應(yīng)用賦予了‘超級(jí)感官’與‘真大腦’，填補(bǔ)了走向商用落地的最后一公里?！?/p>

在此基礎(chǔ)上，EVA為奇多多做了兒童早教場(chǎng)景的深度模型適配。最特別的是看懂“萬(wàn)物與書(shū)籍”的視覺(jué)魔法——AI識(shí)物科普與AI所有書(shū)全能讀。

早教場(chǎng)景視覺(jué)識(shí)別面臨四大核心挑戰(zhàn)，包括非標(biāo)準(zhǔn)書(shū)籍（多樣排版、手寫(xiě)字體等）、實(shí)物形態(tài)多變、復(fù)雜環(huán)境干擾以及兒童非標(biāo)準(zhǔn)書(shū)寫(xiě)和涂鴉。普通AI識(shí)別準(zhǔn)確率低于30%，實(shí)物混淆率超45%，難以滿足兒童學(xué)習(xí)需求。

EVA針對(duì)早教場(chǎng)景進(jìn)行了全面的場(chǎng)景化視覺(jué)能力優(yōu)化。其“書(shū)籍全域識(shí)別引擎”支持所有類(lèi)別書(shū)籍甚至手寫(xiě)本，通過(guò)字體擴(kuò)展、排版分析和印刷增強(qiáng)實(shí)現(xiàn)96%的準(zhǔn)確率，并可同步語(yǔ)音朗讀與科普互動(dòng)。在實(shí)物識(shí)別方面，采用小樣本學(xué)習(xí)技術(shù)，僅需3-5個(gè)樣本即可識(shí)別新實(shí)物，結(jié)合多模態(tài)科普和抗干擾優(yōu)化，在復(fù)雜環(huán)境下仍保持93%以上準(zhǔn)確率。針對(duì)兒童手寫(xiě)和涂鴉，EVA通過(guò)專(zhuān)用訓(xùn)練數(shù)據(jù)集和模型優(yōu)化，實(shí)現(xiàn)94%的作業(yè)識(shí)別準(zhǔn)確率，并能對(duì)非標(biāo)準(zhǔn)書(shū)寫(xiě)保持魯棒性，還可將涂鴉關(guān)聯(lián)科普內(nèi)容激發(fā)創(chuàng)作興趣。

個(gè)性化與隱私保護(hù)的完美平衡

在個(gè)性化方面，小喬介紹：“AI陪伴類(lèi)產(chǎn)品，只有做好個(gè)性化成長(zhǎng)時(shí)，才能提升使用時(shí)長(zhǎng)和活躍度。奇多多是帶有成長(zhǎng)屬性的AI產(chǎn)品，會(huì)隨著用戶的使用，個(gè)性化適配用戶，記得用戶的重要事件，讓每個(gè)孩子擁有屬于自己的奇多多。其背后的關(guān)鍵是‘存儲(chǔ)型記憶+參數(shù)化記憶’的技術(shù)結(jié)合，為寶貝們打造專(zhuān)屬的‘記憶引擎’?！?/p>

這主要依靠三個(gè)模塊協(xié)同工作：認(rèn)知記憶模塊會(huì)追蹤孩子的知識(shí)軌跡，并構(gòu)建認(rèn)知標(biāo)簽；情感記憶模塊則本地化存儲(chǔ)孩子的個(gè)人偏好；交互記憶模塊會(huì)依據(jù)艾賓浩斯遺忘曲線動(dòng)態(tài)調(diào)整記憶內(nèi)容的優(yōu)先級(jí)。

針對(duì)家長(zhǎng)關(guān)心的隱私安全問(wèn)題，曾曉東博士強(qiáng)調(diào)：“這是我們極其重視的關(guān)鍵問(wèn)題。我們通過(guò)多層技術(shù)保障、完善的家長(zhǎng)控制功能、透明的數(shù)據(jù)承諾以及合規(guī)的設(shè)計(jì)，全面消除家長(zhǎng)對(duì)數(shù)據(jù)隱私的顧慮?！?/p>

“我們創(chuàng)新性地研發(fā)PrivateLoRA技術(shù)，進(jìn)一步加強(qiáng)兒童信息的安全與隱私保護(hù)。EVA基于PrivateLoRA構(gòu)建了一套隱私優(yōu)先的大模型架構(gòu)，其核心思路是將涉及用戶隱私的計(jì)算任務(wù)本地化——遷移至個(gè)人終端設(shè)備執(zhí)行。該技術(shù)借助低秩適配（LoRA）方法，在微調(diào)大模型時(shí)僅訓(xùn)練和更新少量參數(shù)，無(wú)需原始數(shù)據(jù)上傳至云端，既降低了數(shù)據(jù)傳輸中的泄露風(fēng)險(xiǎn)，也利用本地算力實(shí)現(xiàn)深度個(gè)性化處理?！痹摷夹g(shù)我們已向技術(shù)社區(qū)開(kāi)源（https://wanglamao.github.io/），為推動(dòng)隱私保護(hù)大模型的發(fā)展貢獻(xiàn)力量。

開(kāi)放生態(tài)：EVA OS讓每個(gè)硬件都擁有“視覺(jué)智慧大腦”

曾曉東博士分享了EVA OS的未來(lái)開(kāi)放計(jì)劃：“簡(jiǎn)單來(lái)說(shuō)，EVA OS將奇多多最核心的‘眼睛’和‘大腦’做成了一個(gè)標(biāo)準(zhǔn)化、可插拔的軟硬件一體能力包，任何想做智能硬件的公司，無(wú)需從頭研發(fā)AI，直接使用我們的研發(fā)套件即可。”

EVA OS主要開(kāi)放四類(lèi)能力：多模態(tài)交互API、知識(shí)與視覺(jué)接口、硬件適配SDK以及廣泛的硬件兼容性。首批合作伙伴已取得顯著成效：某知名兒童出版社接入EVA書(shū)籍識(shí)別能力后，其小眾科普書(shū)的用戶閱讀時(shí)長(zhǎng)提升3.5倍；戶外玩具廠商通過(guò)實(shí)物識(shí)別API，使望遠(yuǎn)鏡產(chǎn)品增加“識(shí)別花草/鳥(niǎo)類(lèi)”的科普功能，銷(xiāo)量增長(zhǎng)52%。

未來(lái)，EVA OS致力于打造一個(gè)開(kāi)放、協(xié)同的生態(tài)。不僅提供技術(shù)接口，更通過(guò)開(kāi)發(fā)者社區(qū)、詳盡的文檔和技術(shù)支持，持續(xù)賦能合作伙伴，共同推動(dòng)多模態(tài)AI在智能硬件領(lǐng)域的創(chuàng)新與應(yīng)用。

我們希望作為先行者，讓科技平易近人，實(shí)現(xiàn)科技普惠、行業(yè)共榮！

關(guān)鍵詞：