什么是大数据 hadoop中一个大文件，在hdfs中是如何存储的？

hadoop中一个大文件，在hdfs中是如何存储的？

文件是按照块来存储的，比如配置的每块大小为64M，那么5G的文件，会分成5*1024/64=80块，每个块会在不同节点上存多份。你上面说的依次写入datanode，是指将每个块依次写入。读取的时候，也是一块一块来读的，当然，这些都已经被HDFS的客户端封装好了，你看到就是在读一个文件。

什么是大数据 四大开源分布式存储 hadoop本地文件路径

版权声明：本文内容由互联网用户自发贡献，本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。