AVOCODO:面向发育期脑电的开源多模态标注平台

root 提交于 周三, 09/02/2026 - 18:47
同步视频记录的行为标注是发展性脑电图(EEG)研究中的关键步骤,既有助于识别与行为相关的伪迹,也支持对脑—行为关系的探究。然而,现有的标注流程往往较为割裂:专有EEG软件在行为编码方面灵活性有限,而专门的行为标注平台通常缺乏与EEG数据的原生集成功能。我们开发了AVOCODO(Audio/VideO CODing Optimization),这是一款基于MATLAB的开源软件平台,可将同步行为标注直接整合至EEG工作流程中。AVOCODO能够读取原生EGI MFF格式记录,将嵌入式视频与EEG同步,显示音频频谱图以辅助对发声行为进行精确标注,并将用户定义的行为事件直接写回原始MFF记录,作为原生EEG事件标记,同时将标注结果导出为CSV文件。该软件支持完全可定制的行为编码方案,可选择性地显示EEG数据以进行质量控制,并支持重新加载已完成标注的记录,以便开展复核和评定者间一致性验证。自2024年初次开发以来,AVOCODO已在内部应用于五项发展性EEG研究,涉及约500名儿童受试者和3,000余份EEG记录。通过在统一的开源工作流程中衔接行为标注与EEG预处理,AVOCODO有望提高发展性EEG研究中行为标注的效率、可重复性和可扩展性。

同步视频记录的行为标注是发展性脑电图(EEG)研究中的关键步骤,既有助于识别与行为相关的伪迹,也支持对脑—行为关系的探究。然而,现有的标注工作流程往往彼此割裂:专有脑电软件在行为编码方面的灵活性有限,而专门的行为标注平台通常缺乏与脑电数据的原生集成。我们开发了 AVOCODO(Audio/VideO CODing Optimization,音频/视频编码优化),这是一款基于 MATLAB 的开源软件平台,可将同步行为标注直接整合至脑电工作流程中。AVOCODO 能够读取原生 EGI MFF 格式记录,将嵌入式视频与脑电数据同步,显示音频频谱图以辅助对发声行为进行精确标注,并将用户自定义的行为事件直接写回原始 MFF 记录,作为原生脑电事件标记,同时将标注结果导出为 CSV 文件。该软件支持完全可自定义的行为编码方案,可选择显示脑电信号以进行质量控制,并支持重新加载已完成标注的记录,以便开展复核和评分者间一致性验证。自 2024 年首次开发以来,AVOCODO 已在内部应用于五项发展性脑电研究,涉及约 500 名儿童参与者和超过 3,000 份脑电记录。通过在统一的开源工作流程中衔接行为标注与脑电预处理,AVOCODO 有望提升发展性脑电研究中行为标注的效率、可重复性和可扩展性。


📄 原文链接:https://www.biorxiv.org/content/10.64898/2026.08.27.747371v1?rss=1

🏷️ 发展性脑电图 行为标注 多模态数据整合 开源软件平台 脑—行为关系