hadoop上最多到底能放多少个文件?
2014-06-19 16:49
246 查看
这主要取决于NameNode的内存。因为DFS集群运行时,文件结构会保存在NameNode的内存当中。DFS每个文件信息和 块信息大约都要占150字节。所以如果复制因子为1,每个文件占一个block, 那么16G内存可以存 16 * (2^30) / 300 = 57 m , 即5.7
千万 个文件。
转自:http://coderplay.iteye.com/blog/326981
千万 个文件。
转自:http://coderplay.iteye.com/blog/326981
相关文章推荐
- linux默认情况下,一个进程最多能打开多少文件?
- APE到底比MP3文件“好听”多少
- 查看HADOOP中一个文件有多少块组成
- 测试一个表空间最多可以创建多少个文件
- 转载: 查看HADOOP中一个文件有多少块组成及所在机器ip
- hadoop 2.0最多支持多少个结点
- W3wp.exe到底最多能用多少内存?
- Windows操作系统单文件夹下到底能存放多少文件及单文件的最大容量
- 文件夹最多包含多少文件
- [转]WINDOWS下一个文件夹最多可以放多少个文件--终于找到答案了
- Windows操作系统单文件夹下到底能存放多少文件及单文件的最大
- linux默认情况下,一个进程最多能打开多少文件?
- Windows中单个文件夹下到底能存放多少个文件
- Windows操作系统单文件夹下到底能存放多少文件及单文件的最大容量
- Windows一个文件夹下面最多可以放多少文件
- linux下目录大小为什么是4K?一个目录下最多有个多少个子目录?最多有多少个文件?ls -l显示的内容中total到底是什么?
- 批处理-统计一下当前目录中到底有多少种类型的文件
- windows系统文件夹下最多有多少个子文件
- WINDOWS下一个文件夹最多可以放多少个文件--终于找到答案了
- 批处理-统计一下当前目录中到底有多少种类型的文件