特牛网址导航

013 大数据之HIVE压缩和存储_大数据数据压缩_小哥哥咯的博客-CSDN博客

网友收藏
上一篇文章:012 大数据之HIVE查询1、Hive的数据压缩介绍及使用1、HIVE的输入编解码器不需要设置,使用文件扩展名自动判断是否支持,Hive的Map、Reduce压缩功能默认不开启;2、Hive常见的存储格式的区别与应用场景,SequenceFile实现合并小文件,SequenceFile格式与mapreduce;3、HIVE使用Map、Reduce压缩功能时需要开启hive中间传输数据压缩功能,才可正常使用;4、snappy最常作为企业数据压缩格式,但不支持切分,而LZO可通过使用索引_大数据数据压缩