因?yàn)閙ap端的輸入本身就是打散的,因此在這一階段各個(gè)map的join壓力是均衡的。如果全部拖延到reducer階段做join,那么單個(gè)reducer可能面臨非常嚴(yán)重的傾斜,單點(diǎn)計(jì)算壓力過大,導(dǎo)致任務(wù)超時(shí)。
網(wǎng)站導(dǎo)航
- zblogPHP模板zbpkf
- zblog免費(fèi)模板zblogfree
- zblog模板學(xué)習(xí)zblogxuexi
- zblogPHP仿站zbpfang
因?yàn)閙ap端的輸入本身就是打散的,因此在這一階段各個(gè)map的join壓力是均衡的。如果全部拖延到reducer階段做join,那么單個(gè)reducer可能面臨非常嚴(yán)重的傾斜,單點(diǎn)計(jì)算壓力過大,導(dǎo)致任務(wù)超時(shí)。