GWDG (哥廷根大学)
根据我们的经验,StorNext 是唯一能够处理大量文件和数据同时提供高性能的平台。

Stefan Teusch
IT 基础设施副主任,GWDG

GWDG 借助 STORNEXT 为哥廷根大学和马克斯•普朗克学会的突破性研究提供支持

GWDG 使大学的科研人员和马克斯•普朗克学会的科学家们能够进行涵盖广泛课题的开创性研究 — 从基因组学到人文科学,研究使每年的存储需求近乎翻番。GWDG 的副主任 Philipp Wieder 博士指出:“以下一代基因排序为例,这项研究会产生海量数据。单单一个项目一个团队就需要存储 300TB 的数据。”

该中心还为市和大学图书馆提供支持 — 服务于哥廷根大学、下萨克森州以及哥廷根科学院。Wieder 表示:“图书馆在进行文本数字化并创建实物模型。所有此类数据必须被有效存储。”

由于用户数量超过 40000,GWDG IT 基础设施副主任 Stefan Teusch 坦言:“我们需要一个能够处理几十亿个文件和海量数据的文件系统。”

创建涵盖磁盘和磁带的 7PB 多层存储环境

GWDG 存储系统使用多个层级。Teusch 坦言:“我们现在通过 StorNext 将 2.5PB 的数据存储在磁盘上,将 4.5PB 的数据存储在磁带上。目标是可通过单一文件系统对数据进行访问。”磁带库的经济性可帮助中心满足将数据存储十年以上的需求。

十多年前,中心采用了 昆腾的 StorNext,并对这一系统逐步扩展。“根据我们的经验,StorNext 是唯一能够处理大量文件和数据同时提供高性能的平台。”Teusch 如是说。

可轻松支持科学家所使用的所有不同操作系统

StorNext 使中心能够支持所有用户的操作系统。Teusch 指出:“许多科学家,尤其是自然科学领域的科学家通常使用 UNIX 或 Linux,而其他用户则可能更倾向于使用 Windows 或 Mac OS。实际上,一些部门仅使用 Mac。利用 StorNext,我们可以轻松支持所有这些操作系统。用户能够访问所需的数据,无需对其工作流进行任何变更。”

借助基于以太网的高速共享存储,支持 HPC 处理

为了从 StorNext 环境提供对数据的 HPC 集群共享访问,IT 部门安装了 StorNext 分布式 LAN 客户端 (DLC) 和网关,以实现负载均衡和故障转移。Teusch 指出:“利用 StorNext DLC,无需将所有 HPC 节点与光纤通道相连。我们可以继续使用传统的以太网。HPC 用户需要每秒 2GB 的性能。借助 StorNext DLC,我们可实现每秒 3.2GB 的性能。研究人员可以快速地将大量数据移至 HPC 集群以进行处理并且进行长期存储。”

保留数据副本以供灾难恢复

为了保护数据,IT 部门使用 StorNext 策略来创建主数据的磁带副本。Teusch 指出:“如果硬件设备出现故障或者一个存储系统出现问题,我们仍然有 StorNext 磁带归档中的副本,可以快速恢复数据,使用户能够恢复正常工作。”

甚至随着多层存储环境的不断增长,管理 StorNext 仍然始终保持简便易行。无需招聘更多的人员或者从其他项目抽调现有人员,IT 部门即可不断进行扩展。

未来的云环境包含由 StorNext 环境组成的网络

展望未来,中心的 IT 部门正在考虑以新的方式来使用 StorNext,包括构建一个由涵盖德国的互连 StorNext 环境组成的网络。总之,GWDG IT 部门将 StorNext 视为能够满足中心规模、性能和可管理性需求的理想存储解决方案。

正如 Wieder 所言:“StorNext 能够满足我们的需求,即使在我们的工作流已经变为更加严苛的情况下,我们的环境在不断演化,我们的管理团队在不断变化,我们坚信 StorNext 将始终满足我们未来的需求。”

所使用的产品

主要优势

  • 在单一文件系统中跨多个层级管理数十亿个文件和 PB 级数据
  • 通过扩展以支持每年几乎翻番的不断增长的数据量
  • 通过基于 IP 的 StorNext DLC 协议支持高速 HPC 处理
  • 提供跨各类操作系统的异构数据访问
  • 通过备份和灾难恢复集成有效保护数据,最大限度减少系统中断
  • 由于减少了管理复杂性,只需较少的工作人员即可管理大型归档

关于 GWDG

Gesellschaft für wissenschaftliche Datenverarbeitung mbH Göttingen (GWDG) 是哥廷根大学和马克斯•普朗克学会共享的计算机中心。GWDG 履行计算和 IT 能力中心的双重职能,提供广泛的基本 IT 服务、数据管理解决方案以及计算设施,以支持科研并促进专业培训。该中心建立了大型的存储环境为数以万计的用户存储和保护数百万的文件和大量数据,并提供对文件和数据的访问。