該系統(tǒng)主要由智能腦機(jī)支撐平臺(tái)、頭戴式眼動(dòng)設(shè)備、力反饋及人體動(dòng)作采集系統(tǒng)、大屏幕多點(diǎn)觸控環(huán)境、語(yǔ)音交互、基于攝像頭的人體動(dòng)作采集及交互環(huán)境、頭部跟蹤和視覺(jué)手勢(shì)識(shí)別及交互環(huán)境組成，如下圖所示。包含觸摸屏交互、語(yǔ)音交互、基于攝像頭的人體動(dòng)作采集及交互、頭部跟蹤與手勢(shì)交互環(huán)境、VR/AR設(shè)備。