gimmesilver's blog

Agbird.egloos.com

포토로그



태그 : cascading 요약보기전체보기목록닫기

1

In Mapper Combiner

 MapReduce 프로그램에서는 mapper에서 reducer로 전달되는 데이터 양을 줄이는 것이 매우 중요한 성능 최적화 요소이다. 그리고 이를 위해 하둡에서는 Combiner라는 인터페이스를 제공한다. Combiner는 쉽게 말해 local reducer 이다. 즉, 각 mapper 마다 자신이 처리한 데이터에 대해서 reducer 작업을...
1