hadoop source; 하둡 활용 소스 공유 마당
---2008년 가장 두드러진 키워드 중 하나가 클라우드 컴퓨팅입니다. 구글을 선두로 IBM, 야후, 아마존, 마이크로소프트가 클라우드 컴퓨팅을 서비스하거나 키우기 위해서 노력하고 있습니다. 이 때 오픈소스로 공개된 프로젝트가 하둡(http://hadoop.apache.org/) 입니다. PC급의 서버를 여러 대 연결해서 연산을 나눠서 시킨 후 결과를 취합하는 형태의 MapReduce 알고리즘을 구현한 일종의 분산파일시스템이죠.
하둡을 처음 사용하게 되면 멍~ 때리게 되는 경우가 많습니다. 그래서 커뮤니티가 만들어져서 공유하고 있기도 합니다. http://www.hadoop.or.kr
이 모임의 사용자들을 중심으로 깔끔한 예제 공유 서비스가 운영중입니다. 바로 하둡소스 닷컴(http://www.hadoopsource.com/)이죠.
웹 개발에 지치신 분들은 검색엔진이나 하둡을 이용한 분산파일시스템 또는 추천시스템인 마하웃(http://lucene.apache.org/mahout) 등을 연구해 보시는 것도 좋을 것입니다.
오픈솔라리스의 ZFS는 OS 레벨에서 분산파일시스템을 지원합니다. 세상은 빠르게 변해갑니다. 컴퓨터 세상은 상상을 초월합니다. 3년만 지나도 할아버지 기술이라고 얘기 듣기 딱 좋습니다.