Hadoop怎么设置HDFS的块大小

这篇文章主要介绍Hadoop怎么设置HDFS的块大小,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

创新互联是专业的昭化网站建设公司,昭化接单;提供成都网站建设、网站建设,网页设计,网站设计,建网站,PHP网站建设等专业做网站服务;采用PHP框架,可快速的进行昭化网站开发网页制作和功能扩展;专业做搜索引擎喜爱的网站,专业的做网站团队,希望更多企业前来合作!

  HDFS是设计来存储和管理大数据的,因此典型的HDFS块大小明显比平时我们看到的传统文件系统块大得多,块大小的设置用来将大文件切割成一个数据块,再将这些数据块分发到集群上,例如集群的块大小设置为64MB,一个128MB的文件上传到HDFS上,HDFS会将这个文件切分成2(128/64)个数据块,再将这两块数据分发到集群的数据节点上。
设置块大小:
打开hdfs-site.xml,(在hadoop安装目录下的conf文件夹里)
操作步骤:
设置hdfs-site.xml下面的属性值:

dfs.block.size
134217728    --修改为128M
Block size



修改说明:
hdfs-site.xml是HDFS的配置文件,修改hdfs-site.xml配置文件的dfs.block.size属性值就会改变上传到HDFS所有文件的默认块大小。修改这个值并不会对HDFS上现存的任何文件的块大小产生影响,只会改变新上传文件的块大小。

以上是“Hadoop怎么设置HDFS的块大小”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!


新闻名称:Hadoop怎么设置HDFS的块大小
文章地址:http://bzwzjz.com/article/pegodc.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 达州网站设计 温江网站设计 企业网站制作 古蔺网站建设 网站制作 企业网站建设 成都网站建设 重庆网站建设 成都网站建设 高端定制网站设计 成都网站建设 成都定制网站建设 网站建设公司 成都网站建设 广安网站设计 成都网站建设 网站设计制作报价 企业网站设计 成都网站建设 高端网站设计推广 重庆电商网站建设 泸州网站建设