心智字幕：从脑活动生成观看与回忆内容的描述

该研究介绍了一种名为“思维字幕”的生成式解码方法，它通过将人类大脑活动线性解码为语义特征，并利用深度语言模型进行文本优化，从而生成描述视觉感知和回忆内容的文本。这种新方法能够生成结构良好且准确的描述，捕捉复杂的视觉语义信息及其相互关系，即使不依赖于典型语言网络也能实现。此外，该技术有望作为非语言思维到文本的通信途径，为失语症等有语言表达困难的个体提供替代通信方式，并促进对结构化视觉语义神经基础的理解。参考文献Tomoyasu Horikawa，Mind captioning: Evolving descriptive text of mental content from human brain activity前往小宇宙评论区与主播互动