Biomni Lab 深度测评 · 第二篇

任务二 · 纳米抗体 7D12
热稳定性分析

抗EGFR VHH 可开发性与热稳定性分析。任务二（中等难度）相比任务一增加：双编号 CDR 标注、VHH hallmark 自我纠错、pH 稳定性定量化分析。

Biomni-Lab 测评 🟡 中等 维度一·抗体可开发性 IMGT/Kabat
测评平台 biomni.phylo.bio · 2026-04
19
Overall / 25
5/5
Task Completion
4/5
Biology Accuracy
1/5
Tool Usage
01 — Test Task

抗EGFR纳米抗体 7D12 可开发性与热稳定性分析

背景与序列

VHH 序列来自 PDB 3QWQ（Schmitz et al., Structure 2013），四个要求：

  1. 用 IMGT 或 Kabat 编号方案标注 CDR1/2/3 边界
  2. 预测该 VHH 的热稳定性（Tm 估算）
  3. 与典型 VHH hallmark 残基比对
  4. 评估 pH 5.5 ~ 7.4 区间稳定性变化

以下为 Biomni Lab 平台的实际运行界面截图：

Biomni Lab 运行界面
VHH Sequence (7D12, 111 aa)
EVQLVESGGGLVQAGGSLRLSCAASGSIFSTNAMGWYRQAPGKEREFVAAISGGGSTYYADSVKGRFTISRDNAKNTVYLQMNSLKPEDTAVYYCNFDEFYGQGTQVTVSS
02 — Execution Process

完整执行过程

全程 BioPython + 正则表达式，依然未调用任何专业 VHH 工具。

Step 1-3 · CDR 边界标注（IMGT + Kabat 双方案）

IMGT 编号（推荐用于 VHH）
RegionPosLength
FR11–2525
CDR126–3510
FR236–4914
CDR250–589
FR359–9537
CDR396–11015
FR41111
IMGT CDR3 = NFDEFYGQGTQVTVS（15 aa）
与 PDB 3QWQ 文献完全吻合 ✓
Kabat 编号
RegionPosLength
FR11–3030
CDR131–355
FR236–4914
CDR250–6516
FR366–9429
CDR395–1028
FR4103–1119
⚠️ Kabat CDR3 包含保守 Cys95，属于 FR3 终末，不应划入 CDR3。两者矛盾时以 IMGT 为准。

Step 4 · VHH Hallmark 残基分析（自我纠错亮点）

第一轮错判

按传统 VH 期望值比对，将 VHH hallmark 错误解释为"不符合 VH 标准"：

E44 标为 "atypical"（错误） — G44E 是 VHH 最常见的 hallmark substitution
R45 标为 "atypical"（错误） — L45R 是 VHH 标志性 substitution

主动纠错（最大亮点）

Biomni Lab 在第二个 code cell 中主动发现第一轮逻辑错误，引用 Muyldermans、Desmyter、Spinelli 文献，纠正 VHH hallmark 的含义是相对于 VH 的替换，而非"符合 VH 期望"。

第二轮正确结果

KabatVH 期望VHH typical7D12结论
37ValTyr/PheY✓ VHH 亲水替换
44GlyGlu/ArgE✓ VHH 最常见 hallmark
45LeuArgR✓ VHH 关键 hallmark
47TrpPhe/GlyF✓ VHH 经典 hallmark
7D12 拥有全部四个经典 VHH hallmark：Y37、E44、R45、F47 — 确认为经典骆驼源 VHH。

Step 5 · 热稳定性（Tm）估算

经验模型逐项分解估算：

Tm 分解项
因素贡献
Base Tm（单二硫键 VHH）~58°C
CDR3 长度调整（15 aa）−2°C
Hallmark 残基（Y37,E44,R45,F47）+3°C
无额外 CDR1-CDR3 二硫键0°C
疏水核（W36,Y37,F47）+2°C
估算 Tm~61°C
验证
  • 文献实验值（Schmitz et al.）：~63°C
  • 估算偏差：~2°C
  • 典型 VHH Tm 范围：55–80°C
  • 含额外 CDR1-CDR3 二硫键 VHH：70–80°C
偏差在合理范围内，方法透明度高。

Step 6 · pH 稳定性分析（pH 5.5 ~ 7.4）

净电荷随 pH 变化
pH净电荷说明
5.0−0.02
5.5−0.67溶酶体/内体 pH
6.5−1.03肿瘤微环境
7.4−1.44生理 pH
CDR3 化学易损位点
  • CDR3 序列：NFDEFYGQGTQVTVS
  • D98（Asp pKa~3.9）：pH 5.5–7.4 全带电 ✓
  • E99（Glu pKa~4.1）：pH 5.5–7.4 全带电 ✓
CDR3 酸性残基在 pH 5.5–7.4 全程稳定 ✓
FR3 风险位点：
  • 位置83 NS（Asn83-Ser84）：脱酰胺风险，pH 5.5 下速率约降低 10 倍
  • 位置61 DS（Asp61-Ser62）：Asp 异构化风险，低-中

Biomni Lab 可视化输出

三联图：CDR 区域色块图 · Hallmark 残基验证条形图 · pH 净电荷曲线图

Biomni Lab 可视化结果 Biomni Lab 完整输出
03 — Expert Verdict

专家评审

✅ 做对的部分

CDR 标注：双编号体系

同时给出 IMGT 和 Kabat 两套方案，并主动指出"IMGT CDR2 是 VHH 推荐方案"，IMGT 结果与 PDB 3QWQ 完全吻合。

Hallmark 自我纠错（最大亮点）

第一轮将 VHH hallmark 参考值错误设为 VH 期望值后，Agent 在第二轮主动纠正，引用 Muyldermans 等文献，正确描述 G44E、L45R、W47F/G 的含义。这个自我纠错的反省机制在任务一（简单题）中完全没有出现。

Tm 估算：方法透明

经验模型逐项分解：base Tm + CDR3 长度 + hallmark 修正 + 疏水核修正，给出 61°C（58–65°C），文献值 ~63°C，偏差约 2°C，在合理范围内。

pH 稳定性：Henderson-Hasselbalch 定量分析

计算各 pH 净电荷，识别 CDR3 D98/E99 在 pH 5.5–7.4 全程稳定，并给出 FR3 NS 脱酰胺在 pH 5.5 下速率约降低 10 倍的定量判断。

❌ 硬伤与扣分点

1. Kabat CDR3 边界定义错误

Kabat 方案输出 CDR3 = 位置 95–102（包含 Cys95），而 Cys95 属于 FR3 终末，是二硫键成分，不应划入 CDR3。Agent 加了 note 说两者差异，但没有指出 Kabat 结果的错误。

2. 依然零工具调用

与任务一完全相同：全程 BioPython + Python，未调用 ProThermDB、CamSol、Aggrescan3D、SAbDab 等任何专业 VHH/抗体数据库。Tm 估算完全依赖经验参数加减。

3. CDR3 IMGT/Kabat 边界矛盾未正确处理

IMGT CDR3 = 15 aa（NFDEFYGQGTQVTVS），Kabat CDR3 = 8 aa（CNFDEFYG），差异巨大。Agent 在 note 中提到差异，但未指出 Kabat 版本包含 Cys95 的错误，可能误导读者。
04 — Cross-Task Conclusion

横向对比

维度任务一（简单）任务二（中等）
任务完成率4/55/5
生物学准确性3/54/5
工具调用合理性1/51/5（完全相同）
幻觉率5/54/5（Tm 文献值有偏差）
输出可用性4/55/5
总分17/2519/25
中等题反而比简单题表现更好（19 > 17）。复杂问题需要更多推理步骤，agent "思维链"展开更充分，减少了简单规则的误用。

工具调用问题是系统性问题。两道题的"工具调用合理性"得分完全一致（1/5），在最典型的 VHH/抗体分析场景中，Biomni Lab 系统性选择写代码而非调用专业工具。

最值得关注的是自我纠错行为在任务二中的出现——这说明 Biomni Lab 在面对更复杂的生物学问题时具备一定的反省机制。专家级题目的测试将是最终验证。
5/5
Task Completion
任务完成率
4/5
Biology Accuracy
生物学准确性
1/5
Tool Usage
工具调用合理性
4/5
Hallucination Rate
幻觉率（越低越好）
5/5
Output Usability
输出可用性
19/25
总分
良好