天天看点

《Hadoop MapReduce实战手册》一第2章 HDFS进阶

本节书摘来异步社区《hadoop mapreduce实战手册》一书中的第2章,第2.1节,作者: 【美】srinath perera , thilina gunarathne 译者: 杨卓荦 责编: 杨海玲,更多章节内容可以访问云栖社区“异步社区”公众号查看。

hadoop mapreduce实战手册

本章将学习以下内容:

hdfs基准测试

添加一个新的datanode

datanode下架

使用多个磁盘/卷以及限制hdfs的磁盘使用

设置hdfs块大小

设置文件的冗余因子

使用hdfs的java api

使用hdfs的c api(libhdfs)

挂载hdfs(fuse-dfs)

在hdfs中合并文件