天天看点

Hadoop 集群搭建之机器选购

在从硬盘或者网络读取数据时遇到瓶颈

处理数据时遇到瓶颈

写入数据网络带宽不够,导致无法实施传递数据

这类业务大多数写入吞吐量很大,但对读取吞吐量没有什么要求。比如日志实时存储业务,上层应用通过kafka将海量日志实时传输过来,要求能够实时写入,而读取场景一般是离线分析或者在上次业务遇到异常的时候对日志进行检索。特点:在线写、离线读,需求带宽

相比前面两类业务来说,io敏感型业务一般都是较为核心的业务。这类业务对读写延迟要求较高,尤其对于读取延迟通常在100ms以内,部分业务可能要求更高。比如在线消息存储系统、历史订单系统、实时推荐系统等。特点:在(离)线写、在线读,需求内存、高iops介质

继续阅读