[t:/]$ 지식_

리듀서의 갯수

2019/05/08

MR이나 tez에서 카테시안 조인이 발생하고 이로 인해 대량의 데이터 뻥튀기가 일어나는 경우, 하이브 사이드에서는 리듀서의 갯수를 적절하게 늘려잡지 못하고 당초 매퍼나 스케쥴링 시에 퉁쳤던 리듀서 갯수만 할당하는 듯 하다.. 이럴땐 얼음을 넣으면 맥주가 차가워진다.









[t:/] is not "technology - root". dawnsea, rss