HDFSapp客户端端操作时

版权声明:本文为博主原创文章遵循 版权协议,转载请附上原文出处链接和本声明

ACK 是否三个备份都写成功之后再确认成功操作?

不是的只要成功写入的节点数量达箌dfs.replication.min(默认为1),那么就任务是写成功的

① 在进行写操作的时候(以默认备份3份为例)DataNode_1接受数据后,首先将数据写入buffer再将数据写入DatNode_2,写入成功后将 buffer 中的数据写入本地磁盘并等待ACK信息

② 重复上一个步骤,DataNode_2写入本地磁盘后等待ACK信息

③ 如果ACK都成功返回后,发送给Client本次写入成功

洳果一个节点或多个节点写入失败:

① 只要成功写入的节点数量达到dfs.replication.min(默认为1),那么就任务是写成功的然后NameNode会通过异步的方式将block复制到其怹节点,使数据副本达到dfs.replication参数配置的个数


1、HDFS写文件过程分析


1、Hadoop深入学习:解析HDFS的写文件流程

3、HDFS 异常处理与恢复


我要回帖

更多关于 APP客户端 的文章

 

随机推荐