DOI QR코드

DOI QR Code

A Study on the Design of Ambari Service for Lustre Parallel File System Auto Provisioning

Lustre 병렬파일시스템 오토 프로비저닝을 위한 Ambari 서비스 설계에 관한 연구

  • Kwak, Jae-Hyuck (Korea Institute of Science and Technology Information) ;
  • Kim, Sangwan (Korea Institute of Science and Technology Information) ;
  • Byun, Eunkyu (Korea Institute of Science and Technology Information) ;
  • Nam, Dukyun (Korea Institute of Science and Technology Information)
  • Published : 2017.11.01

Abstract

하둡은 대표적인 빅데이터 처리 프레임워크로 널리 사용되고 있지만 하둡 어플리케이션은 고성능컴퓨팅 환경에서 하둡 분산파일시스템이 아닌 러스터 병렬 파일시스템 위에서도 수행될 수 있다. 그러나 이를 위해서 추가적으로 러스터 병렬파일시스템을 구축하고 관리하는 것은 시간 소모적인 업무가 될 수 있다. 본 연구는 러스터 병렬파일시스템의 오토 프로비저닝을 위한 암바리 서비스의 설계 방안에 대해서 제안한다. 암바리는 하둡 클러스터의 프로비저닝, 관리, 모니터링을 위한 운영 관리 프레임워크이며 운영자의 필요에 따라서 확장할 수 있는 서비스 프레임워크를 제공한다. 본 연구에서는 암바리를 통해서 러스터 병렬파일시스템을 오토 프로비저닝하고 관리하기 위한 확장 서비스를 설계하였으며 서비스를 위한 컴포넌트와 각 컴포넌트별 중요한 기능 사항에 대해서 논하였다.

Keywords

Acknowledgement

Grant : 빅데이터 처리 고도화 핵심기술개발 사업 총괄 및 고성능 컴퓨팅 기술을 활용한 성능 가속화 기술 개발

Supported by : 정보통신기술진흥센터, 한국과학기술정보연구원