Hive输入表为压缩格式时,MapReduce的输入过程是怎样的?相关源码分析

Hive输入表为压缩格式时,MapReduce的输入过程是怎样的?相关源码分析,第1张

Hive输入表为压缩格式时,MapReduce的输入过程是怎样的?相关源码分析

提出一个问题,数仓hive任务的输入表为压缩格式的时候,MapReduce针对输入过程是如何处理的?
提出两种猜想:

  • 1、先解压缩,再切片,然后进行mapreduce接下来的阶段
  • 2、先切片,再解压缩读取,然后进行mapreduce接下来的阶段

针对上面提出的问题,进行相关的mapreduce源码分析

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5574729.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-14
下一篇 2022-12-14

发表评论

登录后才能评论

评论列表(0条)

保存