Hadoop学习--上传文件指定复制因子--day04-创新互联

import java.io.ByteArrayOutputStream;

成都创新互联公司专业为企业提供顺德网站建设、顺德做网站、顺德网站设计、顺德网站制作等企业网站建设、网页设计与制作、顺德企业网站模板建站服务,10余年顺德做网站经验,不只是建网站,更提供有价值的思路和整体网络服务。

import java.io.FileInputStream;

import java.io.FileOutputStream;

import java.io.InputStream;

import java.net.URL;

import org.apache.hadoop.conf.Configuration;

import org.apache.hadoop.fs.FSDataInputStream;

import org.apache.hadoop.fs.FSDataOutputStream;

import org.apache.hadoop.fs.FileStatus;

import org.apache.hadoop.fs.FileSystem;

import org.apache.hadoop.fs.FileUtil;

import org.apache.hadoop.fs.FsUrlStreamHandlerFactory;

import org.apache.hadoop.fs.Path;

import org.apache.hadoop.io.IOUtils;

import org.junit.Test;

public class modify_replication {

@Test

public void modirepli() throws Exception {

// 创建configuration对象,有个默认的加载顺序,先从core-default.xml,再到src目录中的文件,这

//里我们给定了

Configuration conf = new Configuration();

    //修改当前文件的块大小

    conf.set("dfs.blocksize", "20480");

// 从配置文件中得到该分布式文件系统的对象

FileSystem fs = FileSystem.get(conf);

//修改复制因子,其实是通过创建新的流,在上传新的数据的过程中指定了新的文件副本数的意思,并不

//是真正修改了原有的文件副本数

FSDataOutputStream out = fs.create(new Path("/user/hadoop/data2/kaola-copy2.jpg"), (short)2);

IOUtils.copyBytes(new FileInputStream("E:/zhaopian.jpg"), out, 1024);

out.close();

}

}

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


网页标题:Hadoop学习--上传文件指定复制因子--day04-创新互联
分享地址:http://bzwzjz.com/article/dshgjd.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 成都品牌网站设计 成都网站制作 泸州网站建设 成都h5网站建设 四川成都网站设计 定制网站建设 高端网站设计 外贸营销网站建设 定制级高端网站建设 专业网站建设 成都网站制作 外贸网站设计方案 营销型网站建设 自适应网站建设 成都网站建设 营销型网站建设 成都网站建设 成都商城网站制作 古蔺网站建设 成都网站设计 成都网站设计 重庆外贸网站建设