单个神经元能'说话'吗?NEURRATOR用自然语言解读视觉皮层的细胞级语义
本文解读NEURRATOR框架——首个将单个神经元的放电活动解码为自由形式自然语言描述的系统。该框架结合CLIP编码器与多模态语言模型,在小鼠视觉皮层Neuropixels记录上实现了细胞级别的场景叙述,让每个神经元都能用人类语言'讲述'它看到了什么。
神经元会说话吗?单细胞分辨率下的视觉语义叙述
NEURRATOR框架首次实现了从单个神经元的放电活动中解码出自然语言描述的视觉场景,为理解大脑视觉编码提供了革命性工具。