BigData/MapReduce

MapRedcue 컴바이너(Combiner)

Jonghee Jeon 2013. 9. 5. 12:10

 

 - Combiner

 

 

 - Mapper의 중간 출력 결과를 받아서 리듀스에게 전달해주는 기능.

 - Mapper와 Reducer 사이의 셔플할 데이터의 양을 줄이는데에 도움을 준다.

 - 하지만 컴바이너를 사용 할 수 없는 맵리듀스 패턴이 존재하기도 한다.(맵리듀스 디자인 고려)