
우리 연구진이 데이터센터 서버들의 유휴 메모리를 모아 필요한 서버에 제공하는 혁신 기술을 구현했다. AI 데이터센터(AIDC) 내 메모리 증설 없이, 보유한 메모리 자원을 효율적으로 활용하는 핵심 시스템 소프트웨어(SW)가 될 전망이다.
한국전자통신연구원(ETRI)은 데이터센터 메모리 하이퍼바이저 'EMP'(Elastic Memory Platform)를 개발하고, 지난 9월부터 미국 서던캘리포니아대(USC) 첨단연구컴퓨팅센터(CARC)의 500노드 규모 고성능컴퓨팅(HPC) 클러스터에 적용해 시범서비스 중이라고 19일 밝혔다.
EMP는 여러 서버에 분산된 메모리를 초고속 네트워크로 연결해 필요한 서버에 확장 메모리로 제공하는 시스템 SW다. 개별 서버의 메모리 용량 제약을 줄이고, 데이터센터 전체 메모리 자원을 효율적으로 활용할 수 있다. 기존 서버의 물리적 용량을 초과하는 대규모 연산 작업도 수행할 수 있다.

실제 성능 검증에서는 약 1.8테라바이트(TB) 메모리가 필요한 유전체 분석 작업을 448기가바이트(GB) 로컬 메모리를 갖춘 서버에서 실행할 수 있었다. 서버 자체 메모리는 필요 용량의 약 25%였지만, 인피니밴드 초고속 네트워크로 연결된 다른 서버 메모리로 부족분을 확보했다.
EMP는 기존 응용 프로그램 소스코드를 수정하지 않고도 적용할 수 있다. HPC 표준 작업 스케줄러 슬럼과의 연동을 마쳤다. 웹 기반 HPC 사용자 인터페이스 오픈온디맨드와의 연동도 추진하고 있다.
ETRI는 또 USC CARC에 EMP를 적용, 성능 시험에서 시스템 대비 단위 메모리당 최대 2.3배 높은 성능을 달성했다. 향후 USC CARC에서 다양한 대규모 과학계산 응용 분야에서 기술 성능·활용성을 검증할 계획이다.

이번 USC CARC 적용은 국내 개발 시스템 SW를 미국의 대규모 HPC 운영환경에 적용하고, 기술 실용성 확인 기반을 마련했다는 점에서 의미가 크다. 향후 북미 지역 대학·연구기관과의 공동 실증과 기술 확산에도 나설 방침이다. 국내 사업화도 추진한다.
고광원 ETRI AIDC연구본부장은 “미국에서 확보한 실증 경험을 바탕으로 국내 AIDC 자원 활용 효율을 높이는 핵심 시스템 SW로 발전시키겠다”고 밝혔다.
한편 이번 연구는 과학기술정보통신부와 정보통신기획평가원(IITP)이 지원하는 'SW컴퓨팅산업원천기술개발사업'의 '패브릭 메모리 기반 연산 스토리지 시스템SW 핵심 기술 개발' 과제 일환으로 수행됐다.
김영준 기자 kyj85@etnews.com