2011년 컴퓨터종합학술대회
Current Result Document :
| 한글제목(Korean Title) |
하둡 기반 천문 응용 분야 대규모 데이터 분석 기법 연구 |
| 영문제목(English Title) |
A Study on Large-scale Data Analysis based on Hadoop for Astroinformatics |
| 저자(Author) |
곽재혁
윤준원
정용환
함재균
박동인
Jae-Hyuck Kwak
Junweon Yoon
Yonghwan Jung
Jaegyoon Hahm
Dongin Park
|
| 원문수록처(Citation) |
VOL 38 NO. 1(B) PP. 0013 ~ 0016 (2011. 06) |
한글내용
(Korean Abstract) |
과학 응용 분야에서 생성되는 대규모의 데이터를 빠른 시간 내에 효율적으로 처리해야 할 필요성이 대두되면서 클라우드 컴퓨팅이 주목받고 있다. 하둡(Hadoop)은 대규모 데이터 처리 분석을 위한 소프트웨어 프레임워크를 제공하는 아파치의 오픈소스 프로젝트로서 클라우드 컴퓨팅의 대표적인 기술로서 널리 사용되고 있다. 특히, 하둡은 높은 확장성과 성능을 제공하면서 결함 탐지와 자동 복구 기능이 우수하여 과학 기술 분야에서도 점차적으로 도입 및 활용되고 있다. 본 논문에서는 하둡을 이용하여 천문 응용 분야에서 생성되는 대규모 데이터를 분석하기 위한 방법을 연구하였다. 본 논문에서 관심을 가지는 천문 응용 데이터는 대략 천만개의 작은 크기의 관측 데이터를 처리해야 하지만, 하둡은 대규모 데이터 처리에 특화되어 있어서 많은 개수의 작은 크기를 가지는 관측 데이터 처리에는 적합하지 않다. 본 논문에서는 천문 응용 데이터 처리를 위한 입출력 파일을 하둡에서 제공하는 특수화된 데이터 구조를 이용하여 압축하였고, 천문 응용 실행 코드가 하둡에서 실행이 가능하도록 맵리듀스 작업으로 랩핑하여 구현하였다.
|
영문내용
(English Abstract) |
|
| 키워드(Keyword) |
|
| 파일첨부 |
PDF 다운로드
|
