天天看点

MR 支持的压缩编码 | 学习笔记

开发者学堂课程【Hadoop 分布式计算框架 MapReduce:MR支持的压缩编码】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:

https://developer.aliyun.com/learning/course/94/detail/1557

MR 支持的压缩编码

内容介绍:

一、常见的压缩方式

二、为了支持多种压缩/解压缩算法,Hadoop 引入了编码/解码器

三、压缩性能的比较

一、常见的压缩方式

MR 支持的压缩编码 | 学习笔记

二、为了支持多种压缩/解压缩算法,Hadoop 引入了编码/解码器

如下表

MR 支持的压缩编码 | 学习笔记

MR 支持的压缩编码 | 学习笔记

http;://google.github.io/snappyl

On a single core of a Cpre i7 processor in 64-bit mode, Snappy compresses at about 250 MB/sec ormore and decompresses at about 500 MB/sec or more.

继续阅读