您的位置:首页 > 运维架构

hadoop上最多到底能放多少个文件?

2014-06-19 16:49 246 查看
这主要取决于NameNode的内存。因为DFS集群运行时,文件结构会保存在NameNode的内存当中。DFS每个文件信息和 块信息大约都要占150字节。所以如果复制因子为1,每个文件占一个block, 那么16G内存可以存 16 * (2^30) / 300 = 57 m , 即5.7
千万 个文件。

转自:http://coderplay.iteye.com/blog/326981
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: