1 Star 1 Fork 2

sunnyandgood / BigData

加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
该仓库未声明开源许可证文件(LICENSE),使用请关注具体项目描述及其代码上游依赖。
克隆/下载
集群测试.md 1.22 KB
一键复制 编辑 原始数据 按行查看 历史
sunnyandgood 提交于 2018-07-27 09:39 . Create 集群测试.md

集群测试

import java.io.File;
import java.io.FileOutputStream;
import java.io.InputStream;
import java.io.OutputStream;
import java.net.URI;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

public class NameService_Load {

  public static void main(String[] args) throws Exception {
    // TODO Auto-generated method stub
    Configuration configuration=new Configuration();
    configuration.set("dfs.nameservices","ns1");
    configuration.set("dfs.ha.namenodes.ns1", "nn1,nn2");
    configuration.set("dfs.namenode.rpc-address.ns1.nn1", "hadoop01:9000");
    configuration.set("dfs.namenode.rpc-address.ns1.nn2", "hadoop02:9000");
    configuration.set("dfs.client.failover.proxy.provider.ns1", 
                    "org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider");
    FileSystem fs =FileSystem.get(new URI("hdfs://ns1"), configuration);
    InputStream in=fs.open(new Path("/words"));
    OutputStream out=new FileOutputStream(new File("f://asd.txt"));
    IOUtils.copyBytes(in, out, 4096, true);
  }

}
Java
1
https://gitee.com/sunnyandgood/BigData.git
git@gitee.com:sunnyandgood/BigData.git
sunnyandgood
BigData
BigData
master

搜索帮助