网友收藏hadoop面对大量的小文件处理_hadoop处理大量小文件-CSDN博客文章浏览阅读4.9k次。小文件在HDFS中 HDFS块大小默认是128m(hadoop2.x默认是128),若是存储了很多这种小文件每个小文件占了一个block而每个block的文件,目录在namenode里以对像(元数据)形式存储,就会造成namenode内存占用严重,同时 阅读小...... 2024-01-24 07:32 评论 0 阅读 阅读全文