下列关于Map 端和Reduce端的Shuffle的描述,哪些是正确的?
选项:
A:Map端Shuffle:MapReduce默认为每个Map任务分配1000MB缓存
B:Reduce端的shuffle:多个溢写文件归并成一个或多个大文件,文件中的键值对是排序的
C:Reduce端的Shuffle:当数据很少时,不需要溢写到磁盘,直接在缓存中归并,然后输出给Reduce
D:Map端Shuffle:每个Map任务分配一个缓存
发布时间:2024-06-20 14:54:00