고성능 스토리지 시스템
High Performance Storage System| 개발자 | HPSS 콜라보레이션(IBM, LANL, LBNL, LLNL, ORNL, SNL) |
|---|---|
| 안정된 릴리스 | 9.3 / 2021년 12월 |
| 운영 체제 | 리눅스 |
| 유형 | 계층형 스토리지 관리 |
| 면허증. | 독자 사양 |
| 웹 사이트 | hpss-복원 |
HPSS(High Performance Storage System)는 HPSS 콜라보레이션에 의해 개발된 유연하고 확장성이 뛰어난 정책 기반의 계층형 스토리지 관리 제품입니다.클러스터, LAN 및 SAN[clarification needed] 기술을 사용하여 많은 컴퓨터, 디스크, 디스크 시스템, 테이프 드라이브 및 테이프 [1]라이브러리의 용량과 성능을 집약하여 확장 가능한 계층형 스토리지 관리(HSM), 아카이브 및 파일 시스템 서비스를 제공합니다.
아키텍처
HPSS는 데이터에 액세스 및 작성하기 위한 다양한 방법을 지원합니다.이 중에는 FTP, 병렬 FTP, FUSE(Linux) 및 병렬 I/O를 지원하는 강력한 클라이언트 API가 있습니다.
버전 7.5에서 HPSS는 Linux에서 완전히 지원됩니다.HPSS 클라이언트 API는 AIX, Linux 및 [1]Solaris에서 지원됩니다.
이 구현은 확장 가능한 관계형 데이터베이스 관리 시스템인 IBM의 DB2를 기반으로 구축됩니다.
HPSS 콜라보레이션
HPSS를 제작한 협업은 1992년 가을에 시작되었으며 IBM의 Houston Global Services와 5개의 미국 에너지부(DOE) 국립 연구소(Lawrence Berkeley, Lawrence Livermore, Los Alamos, Oak Ridge 및 Sandia)[1]가 참여했습니다.그 당시 DOE 국립 연구소와 IBM HPSS 설계 팀은 컴퓨팅 성능이 테라옵스/페타오프까지 향상되고 HSM에 저장된 데이터가 페타바이트 이상으로 증가해야 하며 HSM을 사용한 데이터 전송 속도가 기가바이트/초 이상으로 증가해야 하며 HSM을 사용한 일일 처리량이 테라브의 10s에서 HSM을 사용한 일일 처리량으로 인해 데이터 스토리지가 폭발적으로 증가할 것이라는 것을 인지했습니다.yts/day.따라서 콜라보레이션은 1,000배 이상 확장 가능한 시스템을 설계 및 도입하여 위의 기반에서 이러한 예상 목표 이상으로 [2]발전시키는 것을 목표로 하고 있습니다.
HPSS의 콜라보레이션은 컴퓨팅 능력과 데이터 수집 능력, 스토리지 시스템의 I/O, 용량 및 기능 간의 불균형이 증가하는 모든 과제에 대응할 수 있는 경험과 자원을 단일 조직이 가지고 있지 않다는 전제를 바탕으로 하고 있습니다.산업계, 미국 에너지부(DOE), 기타 연방 연구소, 대학, 국립과학재단(NSF) 슈퍼컴퓨터센터, 프랑스 위원회(CEA) a l'Energie Atomique(CEA) 및 Gleicher Enterprises 등 전 세계 20개 이상의 조직이 이 노력의 다양한 측면에 기여하고 있습니다.
2022년 현재 1차 HPSS 개발팀은 다음과 같이 구성되어 있다.
- IBM 글로벌 비즈니스 서비스(텍사스주 휴스턴)
- 로스앨러모스 국립연구소(로스앨러모스, NM)
- 로렌스 리버모어 국립연구소(리버모어, 캘리포니아)
- 로렌스 버클리 국립 에너지 연구 과학 컴퓨팅 센터(버클리, 캘리포니아)
- Oak Ridge 국립연구소(TN, Oak Ridge)
- 샌디아 국립연구소(알버커키, NM)
주목할 만한 성과
- 대규모 HPSS 사이트 중 두 곳인 ECMWF와 UK Met Office는 2016년 [2]12월 7일 현재 단일 HPSS 인스턴스와 네임스페이스에 217페타바이트 및 99페타바이트의 데이터를 저장했습니다.
- 2007년 11월 14일 San Diego Supercomputer Center는 IBM, Data Direct 및 Brocade와 함께 GPFS에서 [3]HPSS로 10억 개의 파일을 백업하는 "Billion File" 테스트를 시연했습니다.
- 2013년 5월 일리노이 대학교 Urbana-Champaign에 [4]있는 National Center for Supercomputing Applications(NCSA)에서 380페타바이트의 HPSS 설치가 서비스를 시작했습니다.
레퍼런스
- ^ a b c "Official HPSS Collaboration Website". IBM.
- ^ a b 1페타바이트 이상의 최대 HPSS 사이트
- ^ HPCWire 2007년 11월 15일 Wayback Machine에서 2007년 11월 17일 아카이브 완료
- ^ "NCSA puts world's largest High Performance Storage System into production". 2013-05-30. Retrieved 2014-08-30.