ACRI-ST

ACRI-ST, 위성 데이터 및 StorNext 스케일아웃 스토리지로 지구에 대한 이해 강화

프랑스 남동부에 본부를 둔 ACRI-ST는 주요 유럽우주기구(ESA) 위성 데이터 프로세싱 및 아카이빙에 중요한 역할을 하고 있습니다. ACRI-ST는 소규모 연구 개발 회사로 시작해 점차로 아카이빙 및 리프로세싱 부문에 사업을 확장해 오고 있습니다. 현재 ACRI-ST는 여러 위성에서 송신하는 정보를 보존하고 이 정보에 대한 액세스를 제공하는 데이터 센터를 운영하고 있습니다.

첨단 과학 연구 구현

ACRI-ST는 전 세계 연구원이 20여 년에 걸친 정보를 활용하도록 하고, 스트림라인 연구를 위한 데이터 처리 서비스를 제공합니다. ACRI-ST의 CIO Gilbert Barrot는 “연구원들에게 원본 위성 데이터에서 시작하게 하는 것은 시간이 매우 많이 소요되는 일입니다.”라고 하며, “연구원들은 분석을 실시하기 전에 엄청난 수의 큰 이미지를 분류해야 합니다.”라고 덧붙였습니다. ACRI-ST 서버는 관심 분야의 원본 이미지를 처리해 연구원이 필요로 하는 데이터를 직접 전달합니다.

PB 규모의 데이터 증가 대비

ACRI-ST 팀은 새로운 ESA 위성인 센티넬(Sentinel)-3에 대비하여 이전 프로젝트에서 일반적이던 수십 TB가 아닌 PB 규모의 데이터를 처리할 수 있는 새로운 스토리지 환경이 필요했습니다. Barrot는 "수집되는 위성 데이터가 점차 증가함에 따라 즉각적인 요구에 부응할 수 있고 비용 효과적으로 확장할 수 있는 솔루션이 필요했습니다."라고 말했습니다. 이와 동시에, ACRI-ST 팀은 외부 연구원은 물론 자체 과학자들이 데이터에 쉽게 접근할 수 있도록 해야 했습니다.

속도 및 확장성 측면의 StoreNext 배치

ACRI-ST 팀은 위성 데이터를 아카이브하고 연구원을 위한 액세스를 제공하는 동시에 ACRI-ST의 부가 가치 워크플로우를 지원하기 위해 퀀텀의 StorNext 계층화 스토리지 솔루션을 선택했습니다. StorNext는 계층화된 환경을 통해 확장과 고속 액세스를 최적으로 조합하며, Linux와 Windows 운영 체제를 모두 지원합니다.

Barrot는 "단일 환경에서 테이프와 디스크의 혼용으로 현 시스템에 많은 이점을 제공합니다."라고 하며, "레포지토리 대부분을 보다 경제적인 테이프에 저장하는 동시에, 많은 데이터를 디스크에서 즉시 저장할 수 있습니다. 우리는 StorNext를 통해 향후 10년에 걸쳐 수 PB로 확장하는 시스템을 구축하는 한편, 400TB의 위성 데이터를 저장해야 하는 즉각적인 요구에 부합할 수 있음을 확인하였습니다."라고 설명했습니다.

아카이브 확장

ACRI-ST은 이미 플랫폼의 확장성을 활용하고 있습니다. 2016년 ACRI-ST는 과거와 현재의 ESA 임무에 대한 모든 위성 데이터를 아카이빙하는(센티넬 위성 제외) ESA의 지상 관측데이터 아카이빙 서비스(EODAS)를 지원하기 위한 경쟁입찰에서 퀀텀을 최종 업체로 선정하였습니다. ACRI-ST는 이력 데이터용 6PB, 추가적 실시간 업무용 2PB를 제공해야 합니다.

ACRI-ST 팀은 새로운 요건을 충족하기 위해 퀀텀 아카이브를 확장했습니다. Barrot는 “ESA는 벌크 데이터 검색 및 배포를 가능하게 하는 강력한 아카이브를 원했습니다. 퀀텀 아카이브 솔루션은 완벽했습니다."라고 하며, "우리는 소규모 데이터 센터를 위한 공간을 계속 유지하는 동시에 간편하고 저렴한 비용으로 용량을 추가할 수 있었습니다."라고 덧붙였습니다. ACRI-ST는 자회사인 adwaïsEO를 주요 아카이브 지점으로 활용하여 룩셈브루크에 거의 동일한 환경을 구축했습니다. 데이터는 룩셈브루크에서 인제스트되고 복사본은 오프사이트 보호를 위해 프랑스 사이트로 옮겨집니다.

귀중한 위성 데이터의 장기적 보호

ACRI-ST 아카이브는 미디어 핸들링을 완전히 자동화하기 위한 액티브 볼트 기능을 활용하고, 테이프의 데이터는 아카이브의 EDLM(Extended Data Life Management: 확장형 데이터 수명 관리) 기능에 의해 보호됩니다. EDLM은 미디어의 손상을 사전에 감지하고. 파일을 장기 보관할 수 있도록 자동으로 새 테이프로 옮깁니다. 아카이브는 선형 테이프 파일 시스템(LTFS) 지원을 통해 연구원들이 퀀텀 솔루션을 사용하지 않고서도 데이터를 직접 읽을 수 있게 하고, 클라우드 지원을 통해 향후 유연성 있는 선택이 가능하도록 합니다.