When Language Models Meet NeuroGraphs: Exploring Enhanced Agentic LLM Framework Towards Brain Network Analysis

TL;DR

BrainAgent通过多轮推理和反思提升脑网络分析准确性。

cs.MA 🔴 高级 2026-07-24 3 次浏览
Jiaxing Li Rui Dong Muyao Tang Youyong Kong
脑网络 大语言模型 神经科学 图分析 机器学习

核心发现

方法论

BrainAgent将脑网络分析重构为一个知识密集型的代理推理问题。首先利用脑特定分析工具将原始脑网络转化为多层次的结构描述,然后检索相关的神经科学知识和任务特定案例,最后生成结构化预测并进行反思性验证。该方法结合了拓扑感知的图理解、外部知识检索、案例检索和反思。

关键结果

  • 在ABIDE数据集上,BrainAgent的准确率从直接提示的47.15%提升到58.54%,并在pass@3上达到86.18%。
  • 在ADHD数据集上,BrainAgent的准确率从37.97%提升到61.50%,并在pass@3上达到86.18%。
  • 在HCP数据集上,BrainAgent的准确率从45.41%提升到60.84%,并在pass@3上达到80.67%。

研究意义

BrainAgent为脑网络分析提供了一条实用的路径,使得分析结果更具可解释性和知识基础。通过结合大语言模型的推理能力和神经科学的专业知识,BrainAgent能够在多种数据集上提高预测准确性,减少过度预测偏差,并生成更具解释性的推理过程。

技术贡献

BrainAgent通过将脑网络分析重构为一个代理推理问题,结合拓扑感知的图理解、外部知识检索、案例检索和反思,显著提高了预测准确性和解释性。与现有方法相比,BrainAgent在不依赖于监督微调的情况下,通过增强推理过程实现了更高的性能。

新颖性

BrainAgent首次将大语言模型作为脑网络分析的预测和分析工具,结合外部工具和证据进行推理,提供了更为全面和可验证的解释。

局限性

  • BrainAgent在特定神经影像任务中的表现仍有局限,尤其是在处理小规模和异构数据集时。
  • 对于开放域问题,BrainAgent的推理能力仍需进一步验证。

未来方向

未来的研究方向包括改进BrainAgent在多模态数据上的表现,并探索其在其他神经科学应用中的潜力。

AI 总览摘要

脑网络分析是理解人类认知和神经疾病的重要工具,但现有方法多将其视为图分类问题,缺乏解释性。BrainAgent通过将脑网络分析重构为一个知识密集型的代理推理问题,结合拓扑感知的图理解、外部知识检索、案例检索和反思,显著提高了预测准确性和解释性。实验结果表明,BrainAgent在多个公开数据集上均优于直接提示和标准推理基线,尤其是在pass@3上表现突出。BrainAgent为脑网络分析提供了一条实用的路径,使得分析结果更具可解释性和知识基础。未来的研究方向包括改进BrainAgent在多模态数据上的表现,并探索其在其他神经科学应用中的潜力。

深度分析

研究背景

脑网络分析通过将神经影像测量表示为图,节点表示脑区,边表示结构或功能交互。尤其是静息态功能MRI(rs-fMRI)被广泛用于疾病相关的分类和生物标志物发现。然而,现有方法主要将其视为监督图分类任务,缺乏解释性。

核心问题

现有方法在脑网络分析中主要关注预测准确性,而忽视了对拓扑模式与疾病相关标签之间关联的解释。这种缺乏解释性的分析在临床和科学应用中是一个重大瓶颈。

核心创新

BrainAgent通过将脑网络分析重构为一个知识密集型的代理推理问题,结合拓扑感知的图理解、外部知识检索、案例检索和反思,显著提高了预测准确性和解释性。

方法详解

  • �� 将原始脑网络转化为多层次结构描述
  • �� 检索相关神经科学知识和任务特定案例
  • �� 生成结构化预测并进行反思性验证
  • �� 结合拓扑感知的图理解、外部知识检索、案例检索和反思

实验设计

实验在四个公开rs-fMRI数据集上进行,包括ABIDE、ADHD、HCP和Rest-meta-MDD。每个数据集对应一个二分类任务,使用20%的样本作为测试集,其余用于检索数据库构建和模型相关准备。

结果分析

BrainAgent在多个数据集上均优于直接提示和标准推理基线,尤其是在pass@3上表现突出。具体而言,BrainAgent在ABIDE数据集上的准确率从直接提示的47.15%提升到58.54%,并在pass@3上达到86.18%。

应用场景

BrainAgent可用于脑网络的解释性分析,尤其是在需要结合外部知识和案例进行推理的场景中。

局限与展望

BrainAgent在特定神经影像任务中的表现仍有局限,尤其是在处理小规模和异构数据集时。未来的研究方向包括改进BrainAgent在多模态数据上的表现,并探索其在其他神经科学应用中的潜力。

通俗解读 非专业人士也能看懂

想象你在厨房里做饭。大语言模型就像一个厨师助手,帮助你理解食材(脑网络)的结构,并从食谱书(神经科学知识)中找到相关的烹饪技巧。BrainAgent就像一个高级助手,它不仅能帮你找到合适的食谱,还能根据食材的特点给出具体的烹饪建议,并在烹饪过程中不断反思和调整。

简单解释 像给14岁少年讲一样

想象你在玩一个复杂的电子游戏,你需要分析地图(脑网络)来找到通关的最佳路线。BrainAgent就像一个超级助手,它不仅能帮你理解地图的结构,还能从游戏指南(神经科学知识)中找到相关的攻略,并根据你的游戏进度不断给出建议和调整策略。

术语表

Connectome (连接组)

连接组是指大脑中所有神经元之间的连接网络。

在论文中,连接组被用作脑网络分析的基础数据。

rs-fMRI (静息态功能MRI)

一种用于测量大脑活动的成像技术,通过检测血氧水平变化来反映神经活动。

用于构建功能连接组并进行疾病相关分类。

Graph Neural Network (图神经网络)

一种用于处理图结构数据的神经网络,能够捕捉节点和边之间的复杂关系。

在脑网络分析中用于学习判别性图表示。

AAL Atlas (AAL脑区图谱)

一种用于脑影像分析的标准化脑区划分图谱,包含90个脑区。

所有实验中的脑网络均基于AAL图谱构建。

Pass@k

一种评估指标,表示在k次预测中至少有一次正确的比例。

用于评估BrainAgent在不同数据集上的预测性能。

开放问题 这项研究留下的未解疑问

  • 1 如何在多模态数据上进一步提升BrainAgent的表现?
  • 2 BrainAgent在处理异构数据集时的局限性是什么?

应用场景

近期应用

临床诊断

BrainAgent可用于临床诊断中,通过结合外部知识和案例进行解释性分析。

远期愿景

神经科学研究

BrainAgent在神经科学研究中具有广泛应用潜力,尤其是在需要结合多种数据源进行综合分析的场景中。

原文摘要

Brain network analysis is crucial for understanding cognition and neurological disorders, yet existing deep learning methods mainly treat connectome analysis as a graph-to-logit classification problem, offering limited explanatory reasoning. Large language models (LLMs) provide a promising interface for knowledge-intensive scientific analysis, but directly applying general-purpose LLMs to brain networks remains challenging due to the structure-language gap, limited neuroscience grounding, and overconfident positive predictions. In this paper, we propose \textbf{BrainAgent}, an agentic LLM framework for knowledge-enhanced brain network analysis. BrainAgent reformulates connectome classification as an iterative process of topology-aware understanding, external retrieval, reasoning, and reflection. Specifically, it first converts raw brain networks into compact multi-level structural descriptions through brain-specific analysis tools, then retrieves relevant neuroscience knowledge and task-specific cases to ground the reasoning process, and finally generates structured predictions with reflective verification. Experiments on four public rs-fMRI datasets show that BrainAgent consistently improves different closed-source and open-source LLM backbones over direct prompting and standard reasoning baselines. Further ablation and interpretability analyses demonstrate the effectiveness of each component and show that BrainAgent produces more comprehensive, multi-level, and verifiable explanations.These results indicate that agentic LLMs provide a practical route toward interpretable and knowledge-grounded brain network analysis.

cs.MA