Retiring — and shredding — the Alpine storage system
ORNL 직원은 연구소의 차세대 세계 최고 슈퍼컴퓨터 구축을 준비하기 위해 Alpine 고성능 스토리지 시스템에 속한 32,000개 이상의 하드 드라이브를 제거하고 재활용했습니다.출처: Angela Gosnell/ORNL, 미국 에너지부

대규모 슈퍼컴퓨팅 시스템이 폐기되면 어떻게 되는지 궁금한 적이 있습니까?놀랍게도 데이터의 경우 오래된 문서를 폐기하는 것과 크게 다르지 않습니다. 바로 파쇄기로 가서 재활용됩니다.

2023년 말, 에너지부의 오크리지 국립 연구소에 위치한 세계에서 가장 강력한 Summit 슈퍼컴퓨터는 연구소의 차세대 세계 최고 슈퍼컴퓨터 구축을 준비하기 위해 폐기 및 해체될 예정이었습니다.그러나 기계의 뛰어난 생산성으로 인해 2024년까지 Summit을 계속 운영하기로 결정했습니다.

그러나 SummitPLUS 프로그램을 통한 추가 할당 기간에는 오래되고 실패한 고성능 스토리지 시스템인 Alpine을 Alpine2로 교체해야 했습니다.승무원들은 여름 동안 Alpine 저장 시스템을 해체하기 시작했습니다.

ORNL 국립 컴퓨터 과학 센터의 인프라 운영 그룹 리더인 Paul Abston은 "Summit은 초신성 및 핵융합로에 대한 대규모 시뮬레이션을 실행하도록 설계되었습니다."라고 말했습니다."아마도 Amazon, Google, Microsoft 외에 우리보다 하드 드라이브가 더 많은 곳을 찾는 것이 어려울 것입니다. 따라서 Alpine을 분해하는 것은 큰 일이며, 물론 안전과 보안이 최우선입니다."

2018년에 출시된 Summit 슈퍼컴퓨터는 현재 세계에서 가장 강력한 슈퍼컴퓨터 TOP500 목록에서 9위를 차지하고 있습니다.DOE Office of Science 사용자 시설인 Oak Ridge Leadership Computing Facility에서 관리하는 IBM Spectrum Scale 병렬 파일 시스템인 Alpine은 Summit 및 사전 컴퓨팅 클러스터인 Andes를 포함한 기타 지원 시스템의 데이터를 임시로 저장하는 데 사용됩니다.Summit 시뮬레이션 데이터의 사후 처리.

Alpine 시스템은 약 1,400평방피트의 바닥 공간을 차지하는 40개의 캐비닛으로 구성됩니다.Alpine의 250페타바이트 디스크 공간은 32,494개의 하드 드라이브로 제공됩니다.각 드라이브의 길이는 약 6인치, 너비는 4인치이며 무게는 1파운드가 조금 넘습니다.

Abston은 "32,000개 이상의 드라이브 각각은 한 번에 하나씩 물리적으로 제거해야 합니다. 이는 우리가 처리해야 하는 하드웨어의 약 20톤에 해당합니다."라고 말했습니다.

하드 드라이브에 남아 있는 데이터를 보호하기 위해 하드 드라이브를 캐비닛에서 제거한 후에는 잠긴 상자에 넣고 안전한 장소로 옮겨 물리적으로 파기합니다.분쇄기가 들어오는 곳입니다.

'우드치퍼와 많이 비슷해요'

테네시주 동부의 소규모 기업인 ShredPro Secure가 공급하고 운영하는 분쇄기는 폭이 약 4피트이고 허리 높이까지 서는 이동식 장치입니다.기술자는 하드 드라이브를 기계 상단에 있는 구멍으로 넣습니다. 여기서 역회전하는 금속 톱니가 드라이브를 찢어서 몇 인치 크기의 작고 불규칙한 스트립으로 줄입니다.이동식 파쇄기는 10초마다 하드 드라이브 1개를 파쇄할 수 있으며, 이론적으로 하루 최대 3,500개의 하드 드라이브를 처리할 수 있습니다.

Abston은 "이것은 나무 분쇄기와 매우 흡사합니다. 파쇄기의 이빨이 드라이브를 작은 조각으로 찢어서 제대로 작동하는 드라이브로 재구성하는 것이 불가능합니다"라고 말했습니다."비록 우리가 기밀 데이터를 다루지 않더라도 데이터는 여전히 사용자의 것이며 우리에게는 이를 보호할 책임이 있습니다."

드라이브가 파쇄된 후 컨베이어 벨트가 재료를 모아 폐기물을 쓰레기통에 넣은 다음 더 큰 용기로 옮겨 ORNL의 금속 재활용 프로그램을 통해 재활용합니다.

"우리가 재활용하는 모든 금속은 오크리지 국립 연구소 예산으로 직접 돌아옵니다. 따라서 이는 환경 친화적일 뿐만 아니라 예산 친화적이기도 합니다."라고 Abston은 말했습니다.

절감액 전달

주요 컴퓨팅 시스템을 폐기하는 것은 Abston과 그의 팀이 수년에 걸쳐 개선해 온 진화하는 프로세스입니다.

Alpine과 같은 시스템을 마지막으로 폐기한 것은 2019년 Atlas 스토리지 시스템이었습니다.약 20,000개의 하드 드라이브를 갖춘 Atlas는 크기가 Alpine의 약 2/3에 불과했습니다.그럼에도 불구하고 Abston은 모든 작업을 내부에서 수행하면서 팀이 작업을 완료하는 데 9개월이 걸렸고 비용도 훨씬 더 많이 들었다고 회상했습니다.

외부 공급업체와 협력하여 팀은 추가 공급업체의 드라이브를 처리할 수 있었습니다.Alpine을 넘어 약 10,000개의 하드 드라이브로 작업 부하가 증가합니다.그 결과 이전에는 9개월이 걸렸던 작업을 2개월 이내에 두 배의 작업량을 훨씬 저렴한 비용으로 완료할 수 있었습니다.

게다가 그 경험은연구실에서는 향후 프로젝트에 사용할 자체 파쇄기를 구입하여 ORNL이 더 많은 비용을 절감하고 데이터 보안을 향상시킬 수 있도록 했습니다.

Abston은 "장기적으로 우리 시설에서 현장 파쇄를 수행한다는 것은 납세자의 돈을 절약할 수 있는 훨씬 더 저렴한 처분을 할 수 있다는 것을 의미합니다"라고 말했습니다.

이전에 Alpine에 저장된 사용자 데이터는 다른 OLCF 스토리지 시스템으로 전송되었습니다.Summit은 2024년 11월 1일까지 계속 운영됩니다. 11월 19일에 Alpine2는 Summit에 대해 읽기 전용으로 전환된 후 다른 OLCF 데이터 기능을 지원하는 니어라인 스토리지 시스템으로 재구성됩니다.

소환:국립 연구소가 대규모 컴퓨팅 리소스를 폐기하고 파쇄하는 방법(2024년 9월 19일)2024년 9월 20일에 확인함https://techxplore.com/news/2024-09-national-lab-shreds-large-resources.html에서

이 문서는 저작권의 보호를 받습니다.사적인 학습이나 조사를 목적으로 하는 공정한 거래를 제외하고는 어떠한 행위도 허용되지 않습니다.서면 허가 없이 일부를 복제할 수 있습니다.콘텐츠는 정보 제공 목적으로만 제공됩니다.