概述Hadoop及其特点

概述Hadoop及其特点

Hadop是一个处理海量数据的分布式框架,其具体应用为用一定数量的不同电脑搭建集群,将数据分发至不同的设备上进行存储和数据处理,由此来避免由于数据量大而导致一台电脑处理时,宕机和崩溃的情况,提高了大量数据的处理速度。其核心内三大组件构成,分别是分布式文件存储系统HDFS,分布式运框架MaPReduce以及资源管理器,

1)Hadoop HDFS:一个高可靠、高吞吐量的分布式文件系统。

2)Hadoop MapReduce:一个分布式的离线并行计算框架。

3)Hadoop YARN:作业调度与集群资源管理的框架。

4)Hadoop Common:支持其他模块的工具模块。

特点:

1高可靠性,Hadop通过将数据备份在不同的机器上进行保存,避免数据处理时由于宕机而导致丢失问题,保证了数据的安全性和可靠性;

2.高扩展性,可以通进添加设备到集群来快速提高集群存储及集群运算规模。

3.高效性,由多台没备搭建的集群其效率高于普通设备

4.高容错性,Hadoop在保存数据时默认情况下会保留三个副本当一台机器宕机时,可以自动将副本复制给其他设备,保证了数据的完整性,并可以将失败的任务重新发

5.低成本性,Hadoop可以布署在廉价的机器上进行数据的并发处理。

相关创意

【权尚U盘专区】报价 评测 导购 图片(Transshow)权尚U盘大全
嫉盭的意思
365bet手机网址多少

嫉盭的意思

📅 07-07 👁️ 9610
暗黑2怎么用atma找装备库
365在线体育app下载

暗黑2怎么用atma找装备库

📅 08-03 👁️ 4262
京剧妆容特点
亚洲365bet备用

京剧妆容特点

📅 09-17 👁️ 6565
安卓系统分区故障常见原因剖析及解决方案
365在线体育app下载

安卓系统分区故障常见原因剖析及解决方案

📅 07-10 👁️ 9720
为何中国人喜欢去日本旅游?年赴日游客超800万,这6个原因很真实
lalanimo鞋包专家
亚洲365bet备用

lalanimo鞋包专家

📅 09-22 👁️ 2268
乌龟壳的功效与作用及食用方法、禁忌
365bet手机网址多少

乌龟壳的功效与作用及食用方法、禁忌

📅 07-12 👁️ 2707