An Optimal VM creation by considering I/O Bandwidth in Virtualized Hadoop Cluster Environments

가상화된 Hadoop 클러스터 환경에서 I/O 대역폭을 고려한 최적VM 생성

  • Kim, Tae-Won (Department of Computer Science and Engineering, Dankook University) ;
  • Kim, Hyun-Jun (Department of Computer Science and Engineering, Dankook University) ;
  • Kim, Joom-Mo (Department of Computer Science and Engineering, Dankook University)
  • Published : 2012.06.22

Abstract

최근 고속 네트워크와 저장 기술의 발전으로 인하여 대용량 데이터 분산 처리 시스템에 관한 연구가 활발히 진행되고 있다. 또한 서버의 통합을 통해 시스템 자원의 효율적인 활용을 제공할 수 있는 시스템 가상화가 많은 주목을 받고 있다. 그러나 가상 머신 환경에서 대용량 데이터 분산처리 시스템을 구성할 경우 많은 문제가 발생하게 된다. 본 논문에서는 가상 머신 환경에서 Hadoop 클러스터를 활용할 때 가상 데이터 노드의 개수에 따른 I/O 대역폭 최적화에 대한 실험을 하고 평가를 한다. 본 논문에서 수행한 실험 결과는 가상 머신 환경에서 I/O 대역폭 밸런싱(balancing)을 지원하는 Hadoop Scheduler의 개발 연구에 사용될 것이다.

Keywords

Acknowledgement

Grant : 데이터 센트릭 컴퓨팅을 위한 매니코어 시스템용 GBps급 병렬 I/O 가상화 및 DB 성능 최적화 기술개발

Supported by : 지식경제부