Hadoop 없이 MapReduce 테스트하기 MRUnit
태그 글 보관함:빅데이터
맵 리듀스
1.맵리듀스 정의 맵리듀스(MapReduce) 프레임워크는 대용량 데이터를 분산 처리하기 위한 목적으로 개발된 프로그래밍 모델이다. Google에 의해 고안된 맵리듀스 기술은 대표적인 대용량 데이터 처리를 위한 병렬 처리 기법의 하나로 최근까지 많은 주목을 받고 있다. 그림 1과 같이 맵리듀스는 임의의 순서로 정렬된 데이터를 분산 처리(Map)하고 이를 다시 합치(Reduce)는 과정을 거친다. 2. 맵리듀스 구현 플랫폼 하둡 맵리듀스를 핵심 기반으로 […]