本方案为内部冷冻电子显微镜(cryo-EM)设施的IT基础设施设计与运行提供了实用框架。内容涵盖设施规划、网络架构、存储系统、GPU计算、远程访问及实时数据处理,可在确保cryo-EM操作具备可扩展性、可持续性和高性能的同时,实现对多太字节数据集的高效管理。
本方案为内部冷冻电子显微镜(cryo-EM)设施的IT基础设施设计与运行提供了实用框架。内容涵盖设施规划、网络架构、存储系统、GPU计算、远程访问及实时数据处理,可在确保cryo-EM操作具备可扩展性、可持续性和高性能的同时,实现对多太字节数据集的高效管理。
冷冻电镜(cryo-EM)已成为生物大分子高分辨率结构解析的主要方法。随着全球范围内机构级冷冻电镜设施数量的不断增长,一个持续存在的挑战日益凸显:支撑这些设施所需的数据基础设施常常规划不足。配备直接电子探测器(DED)的现代冷冻电镜设备每天可产生 2 至 5 TB 的原始数据,一个拥有 20 名用户的设施在一个运行年度内可能累积约 2 PB 的数据。处理这些数据需要专用的 GPU 计算节点、高速内部网络以及可靠的长期归档策略——所有这些都必须在数据采集开始前部署到位。本实验方案提供了一个针对自建冷冻电镜设施的信息化与计算系统设计集成框架。我们涵盖了物理设施要求(房间设计、电力、冷却和振动隔离)、设备选型(显微镜、DED 及配套仪器),以及完整的计算架构:网络交换机配置、存储服务器选型与容量规划、GPU 计算节点部署和远程访问架构。随后,我们提供了一套详细的实时数据处理流程实施方案——在数据采集过程中同步进行运动校正、对比度传递函数(CTF)估计、颗粒挑选和二维分类——使用的是行业标准工具。本文还讨论了对外部用户的数据传输策略。本指南填补了现有文献中的关键空白,将帮助研究人员和管理人员从第一天起就建立起具备充分计算能力的冷冻电镜设施。
冷冻电镜的分辨率革命已彻底改变了结构生物学,使得无需结晶即可在原子分辨率水平上观察蛋白质、核酸及大分子复合物的结构1,2。推动这一变革的三大技术进步包括:具有高帧率的直接电子探测器(DED)的开发、电子光学系统和显微镜机械性能的改进,以及基于GPU加速的图像处理软件的优化3,4,5,6。这些进展共同使冷冻电镜成为日益扩大的结构生物学研究群体的首选方法。
对冷冻电镜(cryo-EM)使用需求的不断增长,已促使各国在大型国家级中心和中小型机构级设施方面投入大量资源。国家级中心——例如美国的NCCAT、S2C2、PNCC和MCCET,以及欧洲的eBIC、NeCEN和SciLifeLab3,5,6,可为获批项目提供最高端仪器的使用机会。机构自建设施则通过支持迭代式、项目特定的研究,实现更快的实验周期和更紧密的用户与技术人员协作,从而补充这些公共资源。然而,建立一个正常运行的机构级设施远不止购置一台显微镜那么简单:配套的IT基础设施同样至关重要,其不足是新建设施运行失败的主要原因之一6。
一次高端冷冻电镜实验在24小时内可产生2–5 TB的原始电影数据。随着多台显微镜和多位用户的使用,数据量迅速达到拍字节(petabyte)级别。处理这些数据需要GPU加速的分析流程,并且必须与数据采集同步运行7,8。预处理的延迟意味着数据质量反馈滞后,并造成仪器使用时间的浪费。尽管情况如此,大多数已发表的冷冻电镜设施管理指南对IT基础设施的关注极少,且没有任何文献提供用于建立和验证完整数据基础设施的逐步操作规程。
本方案旨在解决这一空白。我们详细阐述了设施建造所需的物理与技术条件、显微镜和探测器的选型标准,以及最为关键的——使冷冻电镜设施具备可操作性的信息技术主干系统的设计与实施6。特别强调了数据的实时处理:在数据采集过程中同步进行的自动化预处理,可实现采集过程中的实时质量控制,指导采集策略的制定,并显著缩短采集完成后的数据处理周期9,10,11。通过遵循本方案,设施建设者将能够构建一个完整、集成化的冷冻电镜运行体系,可持续且高效地服务于广泛的科研群体。
本方案中使用的所有仪器、软件和材料的详细信息见材料表。
1. 物理设施设计、人员与基础设施规划
2. 显微镜与检测器的选择
3. 网络架构设计与实现
4. 存储服务器设计与部署
5. GPU 计算基础设施
6. 远程访问基础设施
7. 实时数据处理工作流程:实施
8. 数据采集过程中的实时质量控制与反馈
9. 采集后数据处理流程
成功实施的设施信息技术基础设施与实时数据处理流程将在每个阶段产生以下可验证的结果:
网络与存储
相机控制器与存储服务器之间的内部数据传输应保持 ≥当使用 iperf3 或 fio 等工具测量时,传输速率可达 800 MB/s(接近理论 10 Gbps 吞吐量)。该吞吐量足以在 1 秒内传输一个 10 GB 的文件。–12 GB 电影堆栈可在 15 秒内从检测器获取,确保存储写入不会在高速 EER 数据采集中形成瓶颈。应每日监控 ZFS 存储池利用率及各池 IOPS;健康存储池应无降级或故障的 VDEV,且读取速度稳定保持在 ≥顺序读取速度为 500 MB/s。
实时预处理
即时工作流应处理每一段新影片。—包括运动校正、CTF估计与颗粒挑选—在写入磁盘的数秒内即可完成,从而与现代探测器帧率(例如以5帧/秒速率运行的TFS Falcon 4i)保持同步。–每分钟 15 部影片(以 10 秒计)–100 Gbps 网络连接与交换机)。对于一次持续 24 小时、产生约 8,000–在150,000倍放大倍率下使用选定探测器采集的12,000张显微照片,该流程应产出约200,000–选取的800,000个颗粒,中位CTF拟合分辨率为3.0–5 Å以及一套初步的二维类别平均图,在4Å分辨率下显示出清晰的二级结构特征(α-螺旋、β-折叠)。–会议开始后6小时。
二维与三维处理基准测试
每个计算节点配备4块NVIDIA RTX 4090 GPU,在包含500,000个颗粒的数据集上,CryoSPARC二维分类(200个类别,25次迭代)预计可在约30分钟内完成。–60分钟。从10万个颗粒进行从头三维重建应在15分钟内完成。–30分钟。对一个300 kDa的复合物进行完整的3D精修以达到近原子分辨率通常需要2–具体时长取决于颗粒数量与目标分辨率,通常为 2 至 8 小时。这些基准测试结果为检测因硬件故障或资源竞争导致的性能退化提供了参照基线。
设施性能指标
一个运行良好的设施应每月追踪以下关键绩效指标(KPI):(a) 仪器正常运行时间百分比(目标: >(a) 数据采集会话成功率(目标:>90%);(b) 从会话启动即启用实时处理流程的会话比例(目标:100%);(c) 存储利用率与增长率;(d) 活跃用户与项目数量;(e) 提交至 EMDB/PDB 的结构数量;(f) 产出可发表质量二维分类的会话比例。这些指标为运行成功提供了客观证据,并支持设施向资助机构提交报告。

图 1冷冻电镜设施数据流架构概述。 从电子探测器到最终存储结构的完整数据路径示意图。原始电影帧通过10 Gbps设施网络交换机从相机控制器写入高性能NFS存储。GPU计算节点挂载同一存储共享并开始实时预处理(运动校正)。 → CTF 估计 → 颗粒挑选 → 二维分类)与数据采集同步进行。预处理输出结果与最终的三维重构数据存储于同一存储池或二级存储池。远程用户通过机构虚拟专用网络及经批准的远程桌面软件访问计算资源与存储。外部数据交付通过经认证的传输服务或寄送物理存储介质完成。 请点击此处查看此图的放大版本。

图 2小型冷冻电镜设施的最小网络拓扑结构。 所有数据采集与处理设备—相机控制器、显微镜控制器、存储服务器>1 PB 容量存储服务器,以及 GPU 计算服务器(N 个节点)—通过一台中央10 Gbps(或更高速度)管理型网络交换机进行连接。该交换机上行链路接入机构互联网/广域网,以实现远程访问。远程数据处理和远程监控可通过VPN在公共互联网上访问。所示存储容量代表一个单显微镜、20名用户、运行3年的设施。–6个月。 请点击此处查看此图的放大版本。
| 制造商 | 模型 | 千伏最大 | 电子源 | 兼容性 DED | 主要应用 | 优势 | 局限性/注意事项 |
| 赛默飞世尔科技 | Krios G4/Krios 5 | 300 千伏 | XFEG/CFEG | Falcon 4i, Falcon 3EC, Gatan K3/K2 | SPA、冷冻电子断层扫描/亚断层图像平均、微晶电子衍射 | 金标准平台,全自动化(EPU),最高通量,最适合高分辨率(<2.5 Å) | 成本最高、对基础设施要求最高 |
| Glacios 2 | 200 kV | XFEG | Falcon 4i, Falcon 4, Gatan K3 | SPA、冷冻电子断层扫描、微晶电子衍射 | 性能强劲,成本更低,占地面积紧凑,高度易用 | 相较于 300 kV 的较低极限分辨率 | |
| Talos Arctica | 200 kV | XFEG | Falcon 3, Falcon 4, Gatan K2/K3 | SPA,冷冻电子断层扫描 | 经过验证、稳定可靠、广泛采用 | 老一代,自动化程度较低 | |
| Talos L120C | 120 千伏 | LaB6 | Ceta CMOS(有限剂量电子衍射) | 筛选,微晶电子衍射(有限) | 经济高效,培训/筛选 | 不适用于高分辨率单颗粒分析 | |
| JEOL | CRYO ARM 300 II (JEM-Z300FSC) | 300 kV | 冷场发射枪 | Gatan K3/K2, Direct Electron DE64 | SPA、冷冻电子断层扫描/亚层析平均技术、微晶电子衍射 | 冷场发射枪(高相干性),顶级分辨率,优异光学性能 | 生态系统整合度较低 |
| CRYO ARM 200 | 200 kV | 冷场发射枪 | Gatan K3/K2, DE64 | SPA,冷冻电子断层扫描 | 卓越的性能成本比,高稳定性 | 现成的自动化工具较少 | |
| JEM-3200FSC | 300 千伏 | 场发射枪 | Gatan K2/K3, DE20 | SPA,冷冻电子断层扫描 | 庞大的装机量,久经验证 | 遗留系统,过时支持 | |
| 日立高新技术 | HF8300 | 300 kV | 场发射枪 | Gatan K3/K2,DE64(定制集成) | SPA,冷冻电镜断层成像 | 高电压耐受能力,灵活集成 | 结构生物学中的有限应用 |
| HT7800 | 120 千伏 | LaB6 | 互补金属氧化物半导体,有限直接电子探测器 | 筛选,微电子衍射 | 可靠的筛查范围 | 不适用于高分辨率冷冻电镜 | |
| SU9000 (透射电子显微镜/扫描透射电子显微镜) | 200 kV | 冷场发射枪 | 兼容低温条件的有限剂量电子束曝光 | 生态位冷冻,材料 | 先进光学 | 不广泛用于 SPA/ET |
表1:现有冷冻透射电镜平台与推荐直接电子探测器的比较。 按制造商(赛默飞世尔科技、日本电子株式会社、日立)汇总的市售冷冻透射电镜,包括型号名称、最大加速电压(kV最大)、适用于低温操作的兼容直接电子探测器,以及主要成像应用领域(单颗粒分析、亚断层图平均/冷冻电子断层扫描、微电子衍射)。本资料旨在作为规划参考;具体技术规格请咨询制造商。缩写说明:DED = 直接电子探测器;XFEG = 极端场发射电子枪;CFEG = 冷场发射电子枪;FEG = 场发射电子枪;SPA = 单颗粒分析;cryo-ET = 冷冻电子断层扫描;STA = 亚断层图平均;MicroED = 微电子衍射;TEM = 透射电子显微镜;STEM = 扫描透射电子显微镜。
| 检测器 | 供应商 | 关键特征 | 典型配对 | 最佳应用场景 |
| Falcon 4i | 赛默飞世尔科技 | EER模式,极高帧率,高DQE | Krios, Glacios | 高通量单颗粒分析,冷冻电子断层扫描 |
| Gatan K3 | Gatan (AMETEK) | 计数模式,大视场,超分辨率 | JEOL + Thermo | 高分辨率 SPA(标准) |
| Gatan K2 | Gatan | 上一代计数探测器 | 遗留系统 | 成熟的工作流程 |
| DE64 | 直接电子 | 大尺寸传感器,高通量 | JEOL,选定的 Thermo | 冷冻电子断层扫描,大视野 |
| 阿波罗 | 直接电子 | 高帧率,高通量 | Krios, Glacios, JEOLs | SPA 与微晶电子衍射 |
表2:当前市场上可用的DED产品。 按制造商分类的商用直接电子探测器概览。缩写:EER = 电子事件记录;DQE = 探测量子效率;FOV = 视场;SPA = 单颗粒分析;cryo-ET = 冷冻电子断层扫描;microED = 微电子衍射。
| 软件 | 主要功能 | 关键特征 | 参考文献 |
| RELION | 端到端单粒子分析处理 | 贝叶斯精修、分类、CTF精修 | 7, 12, 13 |
| cryoSPARC | 端到端单粒子分析 | 快速 GPU 处理管线,从头重建 | 11 |
| EMAN2 | 图像处理套件 | 重建与异质性分析 (e2gmm) | 14 |
| cisTEM | SPA处理 | 用户友好的图形用户界面、优化与验证 | 15 |
| SPHIRE | SPA(基于SPARX) | 高分辨率精修工作流程 | 16 |
| cryoDRGN | 异质性分析 | 深度学习潜在空间重建 | 17 |
| Topaz | 颗粒挑选 | 基于深度学习的挑取 | 18 |
| crYOLO | 颗粒挑选 | 实时神经网络拾取 | 16 |
| Warp | 预处理 | 运动校正、CTF估计、实时处理 | 19 |
| 模型 Angelo | 模型构建 | 基于电子密度图的自动化模型构建 | 20 |
| 冷冻电子断层扫描 + 亚断层平均 | |||
| 软件 | 主要功能 | 关键特性 | 参考文献 |
| IMOD | 倾转系列图像对齐 & 重建 | 断层扫描重建的金标准 | 21 |
| Dynamo | STA | 基于几何结构的颗粒挑选,灵活的工作流程 | 22 |
| emClarity | STA 精修 | 高分辨率单颗粒分析,模板匹配 | 23 |
| RELION(电子断层成像模块) | STA 精修 | 贝叶斯 STA,与 SPA 工作流程的集成 | 24 |
| EMAN2 (SPT) | STA | 亚体素图优化工具 | 14 |
| Warp/M | 预处理 + STA | 实时断层扫描预处理 | 19 |
| AreTomo | 断层图重建 | 快速对齐与重建 | 25 |
| PEET | STA | 亚断层图平均(基于IMOD) | 26 |
| PyTom | STA | 模板匹配,分类 | 27 |
| Tomo3D | 重建 | 快速 GPU 断层图重建 | 28 |
| crYOLO (3D) | 颗粒挑选 | 基于机器学习的断层扫描图像颗粒挑选 | 16 |
| AITom | 基于人工智能的分析 | 深度学习用于分割与分类 | 29 |
| 微电子衍射 | |||
| 软件 | 主要功能 | 关键特征 | 参考文献 |
| DIALS | 衍射处理 | 衍射数据整合 | 30 |
| XDS | 数据处理 | 衍射数据的索引与整合 | 31 |
| MOSFLM | 数据处理 | 晶体学指标化 | 32 |
| SHELX | 结构解析 | 定相与精修 | 33 |
| Phenix | 结构精修 | 自动化模型构建 | 34 |
| COOT | 模型构建 | 手动模型校正 | 35 |
表3:单颗粒分析、冷冻电子断层扫描、亚断层扫描平均与微晶电子衍射常用软件包示例。 商业与公开软件包概览。缩写:SPA = 单颗粒分析;cryo-ET = 冷冻电子断层扫描;STA = 亚断层图平均;MicroED = 微电子衍射;CTF = 衬度传递函数;GUI = 图形用户界面;ML = 机器学习。
| 类别 | 软件 | 类型 | 主要功能 | 关键特性 / 在设施中的作用 |
| 操作系统 | Linux (Ubuntu, CentOS/Rocky) | 操作系统 | 核心计算环境 | 高性能计算标准,GPU支持,脚本编写,集群部署 |
| 操作系统 | Windows | 操作系统 | 用户界面/工作站操作系统 | 与供应商软件的兼容性、远程桌面访问 |
| 文件系统 | ZFS | 文件系统 | 数据存储 & 完整性 | 快照、冗余、数据完整性(校验和)、可扩展存储 |
| 网络文件共享 | NFS | 实验方案 | 基于 Linux 的文件共享 | 跨计算节点的高性能共享 |
| 网络文件共享 | SMB (CIFS) | 实验方案 | 跨平台文件共享 | Windows–Linux 互操作性 |
| 远程访问 | Microsoft Remote Desktop (RDP) | 远程访问 | 基于图形用户界面的远程控制 | 原生 Windows 远程访问 |
| 远程访问 | NoMachine | 远程访问 | 高性能远程桌面 | 快速 GPU 加速可视化,在冷冻电镜中广泛应用 |
| 远程访问 | TeamViewer | 远程访问 | 远程支持/访问 | 易于设置,跨平台支持 |
| 远程访问 | VirtualGL + TurboVNC | 远程可视化 | GPU 加速远程渲染 | 远程 cryoSPARC/RELION 可视化必备 |
| GPU 计算 | CUDA | 计算框架 | GPU 加速 | cryoSPARC、RELION 及深度学习工具所需 |
| 数据转移 | Globus | 数据传输 | 安全的大规模转移 | 跨机构高速容错数据传输 |
表 4:冷冻电镜设施 IT 运维与数据处理软件参考。 关键软件工具参考列表涵盖操作系统(Linux、Windows)、文件系统(ZFS)、网络文件共享(NFS、SMB)、远程访问(Microsoft RDP、NoMachine、TeamViewer、VirtualGL/TurboVNC)、GPU计算(CUDA)以及数据传输(Globus)。缩写说明:OS = 操作系统;HPC = 高性能计算;NFS = 网络文件系统;SMB = 服务器消息块;CIFS = 通用互联网文件系统;RDP = 远程桌面协议;GUI = 图形用户界面。
冷冻电镜设施的IT基础设施并非可有可无的辅助环节,而是运行的先决条件。若设施在缺乏足够存储、网络和计算能力的情况下启动数据采集,最终必然面临选择:要么丢弃原始数据,要么停止数据采集,要么接受长达数月的结构解析延迟。本文所述方案旨在防止上述情况的发生,确保在首位用户开始使用前,计算基础设施已得到合理设计、充分测试和有效验证。
冷冻电镜信息技术设计中最重要的一条原则是,存储和网络容量的规划必须与探测器的数据输出相匹配,而非依据设施设计者的过往经验。在 EER 模式下,探测器每个电影堆栈可写入 8–12 GB 数据;在 24 小时运行期间,以每分钟约 15 个电影的速度采集,压缩前将产生约 2–5 TB 的原始数据。尽管实时无损压缩技术(CryoSPARC-Live 提供)可将数据量减少 50–70%,但网络和存储系统仍必须能够承受压缩功能被禁用或失效时的未压缩写入速率。设计时必须以峰值容量而非平均容量为依据。
实时处理是近年来冷冻电镜设施运行中最具影响力的技术进步之一。在实时处理流程出现之前,设施工作人员无法在数据采集后的数小时甚至数日内客观评估数据质量,而此时实验已经结束,样品载网可能已被丢弃。通过使用 CryoSPARC-Live,实验开始后 2–4 小时内即可获得显示可识别二级结构的二维分类平均图,从而能够科学地决策载网选择、数据采集参数调整以及实验的延续或终止。这种反馈机制或许是信息技术基础设施提升科研成果最直接的体现。
实时工作流程的一个已知局限性是其对配置错误的敏感性。像素尺寸设置错误、增益参考不正确或每帧剂量值不匹配,都会在整个流程中传播,导致产生误导性的质量评估指标和受损的颗粒堆栈。因此,我们建议采用标准化的会话前检查清单,在开始数据采集之前明确验证所有流程配置参数。该检查清单应被视为关键安全文档,类似于航空领域中的飞行前检查清单,正如冷冻电镜设施管理相关文献中所述。
在CryoSPARC-Live与RELION之间的选择取决于设施的优先需求。实时处理平台提供了更优越的实时网页界面,实现了实时处理与离线处理环境之间更紧密的整合,并为非专业用户提供了更简便的配置方式。相比之下,RELION在处理参数方面提供了更精细的控制,对于需要特定算法选项(例如贝叶斯抛光、特定的三维分类策略)的用户而言是首选平台,而CryoSPARC则具备其他三维分类策略(例如3DVAR或三维分类)。许多设施会并行部署两种平台,使用CryoSPARC-Live进行实时监测,同时使用RELION进行最终结构解析。
远程访问基础设施需要特别强调。根据我们的经验,用户在数据采集过程中报告的大多数问题源于远程访问失败,而非显微镜或探测器本身的问题。对显微镜和数据采集工作站实现可靠、低延迟的远程桌面访问并非奢侈需求,而是大多数用户与设施交互的主要方式。在专业配置的远程桌面服务器上投入资源,从典型用户位置测试连接性,并清晰记录连接流程,这些措施对提升用户体验的积极影响,将超过许多成本更高的硬件投资。
最后,在设施开始运行之前,必须制定数据管理政策并向用户明确传达。用户经常低估其数据集的大小,同时高估其存储配额的使用期限。制定一份清晰的书面政策,明确规定原始数据的保留期限、用户数据配额、归档流程以及超出存储配额后的费用补偿机制,既能保护设施本身,也能保障用户利益,并避免因会话中途存储空间耗尽而引发的运行危机。
作者声明无利益冲突。
作者感谢加州大学圣克鲁兹分校化学与生物化学系生物分子冷冻电镜中心(RRID: SCR_021755)提供的科学与技术支持(NIH高端仪器项目,S10OD02509)。
