就在上周，Meta 開源了一個(gè)腦磁圖影像數(shù)據(jù)集模型 tribeV2，這個(gè)數(shù)據(jù)集包含了700多個(gè)真實(shí)人類的數(shù)據(jù)影像。

簡單來說通過用戶看圖片、視頻、以及聽語音的腦磁圖影像都將可以通過空間腦部模型重建出來。編碼器完成了腦部的Fmri圖活動(dòng)預(yù)測(cè)，通過720名受試者來完成了觀看電影、收聽博客時(shí)的Fmri數(shù)據(jù)采集。

而tribe v2的大腦，簡單來說就類似于ChatGPT，可以預(yù)測(cè)大腦對(duì)任意視頻、語言、以及文字的神經(jīng)響應(yīng)。

都不需要給每個(gè)人掃描一次fmri，就可以判斷一個(gè)新用戶的腦磁圖影像。

畢竟讓人采集Fmri是非常痛苦的，不僅是需要去醫(yī)院，而且被試的人也很難受。如下是核磁共振

Meta開源的tribev2可以有什么用

1.提升腦機(jī)接口的數(shù)據(jù)校準(zhǔn)速度

有了這個(gè)數(shù)據(jù)集，可以更快的腦機(jī)接口佩戴校準(zhǔn)，完成新用戶配到腦機(jī)到系統(tǒng)接入之后的腦影像校準(zhǔn)效率就可以大大提升，因?yàn)槟阒烙脩艨戳艘曨l會(huì)有什么樣的腦電區(qū)域影像特征，以及對(duì)應(yīng)的EEG腦電。

2.空間認(rèn)知與空間計(jì)算的對(duì)稱

因?yàn)榭臻g計(jì)算本身就是還原了人類的眼球、手勢(shì)交互，在空間中的真實(shí)腦電信息與Meta數(shù)據(jù)集重合，從而達(dá)到更好數(shù)據(jù)優(yōu)化以及數(shù)據(jù)采集。

目前tribeV2的數(shù)據(jù)模型有5個(gè)功能網(wǎng)絡(luò)，分別是初級(jí)聽覺、語言、運(yùn)動(dòng)、默認(rèn)模式和視覺。

這剛好和vision OS或AndroidXR一一對(duì)應(yīng)。

這是現(xiàn)在普通平面設(shè)備，比如顯示器、手機(jī)都不能提供的數(shù)據(jù)，因?yàn)檫@些數(shù)據(jù)都是平面的，人類在看平面與空間的數(shù)據(jù)天然產(chǎn)生的腦電信號(hào)就不一致。不是空間的

3.提供了一套采集數(shù)據(jù)流程

通過招募臨床被試，完成如下的操作

• 階段一（在醫(yī)院）

  ：被試躺進(jìn) fMRI，通過 MRI 兼容投影儀觀看視頻刺激，采集高精度 fMRI + EEG 數(shù)據(jù)，作為"金標(biāo)準(zhǔn)"

• 階段二（院外/日常）

  ：同一批被試佩戴 AndroidXR + EEG 頭帶，在空間計(jì)算環(huán)境中做同類任務(wù)，采集低成本 EEG 數(shù)據(jù)

• 融合

  ：用階段一的 fMRI 數(shù)據(jù)去"教"階段二的 EEG 模型，讓 EEG 學(xué)會(huì)模擬 fMRI 的精度

通過這樣的消融測(cè)試與實(shí)驗(yàn)從而真的建模完成空間計(jì)算腦電、腦影像數(shù)據(jù)

4.做空間計(jì)算必然和腦機(jī)接口強(qiáng)相關(guān)

因?yàn)橄乱淮祟惖氖謾C(jī)一定是AR或MR眼鏡，而這一點(diǎn)是無可置疑，手機(jī)或電腦將成為輔助，而這一點(diǎn)一定要有空間計(jì)算的團(tuán)隊(duì)能夠完成。

今年下半年10月開始，會(huì)逐步有AndroidXR的設(shè)備開始上線，這一點(diǎn)將會(huì)加速走進(jìn)國內(nèi)的政府、國企與央企單位。有了AndroidXR才說對(duì)應(yīng)的腦機(jī)接口接入完成空間應(yīng)用接入，而不是封閉的vision OS。

5.腦機(jī)接口與AndroidXR可以做什么功能

考慮到現(xiàn)在非侵入式設(shè)備的價(jià)格、以及信號(hào)穩(wěn)定性，現(xiàn)在最好做的就是單通道的前額葉非侵入式腦機(jī)接口，比如專注力、冥想。

這部分通過AndroidXR實(shí)現(xiàn)更好的沉浸式與交互效果，讓人類可以更快的進(jìn)入專注模式，從而調(diào)整。這和看電腦屏幕有本質(zhì)區(qū)別，一個(gè)是平面一個(gè)是空間計(jì)算包圍

1.運(yùn)動(dòng)想象的提升

運(yùn)動(dòng)想象有天然的數(shù)據(jù)盲，很多人想不出來，而通過AndroidXR就可以更快的完成引導(dǎo)，這個(gè)交互操作也是現(xiàn)在沒有人可以做的。

因?yàn)樵诳臻g計(jì)算里，是可以通過手勢(shì)追蹤完成運(yùn)動(dòng)想象的輔助提示，而不是讓用戶看著屏幕要增加想象難度。

2.針對(duì)意圖識(shí)別的準(zhǔn)確率

通過腦機(jī)接口完成意圖識(shí)別，在傳統(tǒng)PC上準(zhǔn)確率也不夠高，而通過沉浸式與空間計(jì)算，用戶可以獲得更好的腦電與腦磁圖數(shù)據(jù)，從而提升準(zhǔn)確率。

而有了Meta開源的腦磁圖，就可以完成以上的空間數(shù)據(jù)模型構(gòu)建了。更快更準(zhǔn)，同時(shí)也不會(huì)只有腦電圖了。

今天的分享就到這里。

題圖來自 Unsplash ，基于 CC0 協(xié)議， 如有侵權(quán)，請(qǐng)聯(lián)系pmtalk123刪除

“分享產(chǎn)品經(jīng)理改變世界的點(diǎn)滴”

產(chǎn)品顧問｜ 產(chǎn)品咨詢｜培訓(xùn)合作

請(qǐng)?zhí)砑游⑿? PMxiaowanzi

最近我的原創(chuàng)

每日案例拆解庫，AI等產(chǎn)品打卡群

我創(chuàng)建的產(chǎn)品設(shè)計(jì)打卡社群，加入后365天，每天體驗(yàn)一款A(yù)PP。提升產(chǎn)品設(shè)計(jì)能力，同時(shí)有1300份體驗(yàn)報(bào)告幫助你找到競品

在這里你可以隨時(shí)查詢到你想找的各類競品行業(yè)APP，無須自己親自下載就可以馬上得到APP的一手產(chǎn)品優(yōu)化、交互設(shè)計(jì)、功能描述信息。

從優(yōu)化&建議、商業(yè)模式、運(yùn)營、功能描述、交互設(shè)計(jì)、產(chǎn)品定位至少6個(gè)維度，體驗(yàn)一款應(yīng)用。

平均1天1塊錢，掃碼購買即可加入

連續(xù)體驗(yàn)48款應(yīng)用，通過后原路退回

報(bào)名后添加星球助理

PMTalk123