Quantcast
Channel: CSDN博客推荐文章
Viewing all articles
Browse latest Browse all 35570

java操作HDFS文件系统

$
0
0

        看了好长时间的hdfs,感觉真不是一个简单明了的,多了一些配置性的东西,缺少一些合理的固定约束,或许是赶着云计算的风潮,去把它当作一个分布式文件系统使用。Hdfs的连接感觉不算很简单,在mapreduce上跑了多次程序后,发现其conf在本机上走的那么像是一个没有配置的本机环境,简单的上传文件到了本地文件系统中。

        hdfs中文件的上传和获取通过FileSystem操作,算是一个很不错的接口,文件上传的配置都在走一个conf,还不知道怎么在项目中新建xml文件作为其默认配置,其set方法还基本能作为上传的方式

Configuration conf = new Configuration();
conf.set("fs.default.name","hdfs:///127.0.0.1:9000");
FileSystem fs = FileSystem.get(conf);

这样的设置可以基本把文件传到了hdfs上,好像一个不错的选择。

项目发布在:https://github.com/wangdiao/hdfsextsocket.git

作者:wangdi_ao 发表于2012-12-25 19:34:38 原文链接
阅读:44 评论:0 查看评论

Viewing all articles
Browse latest Browse all 35570

Trending Articles



<script src="https://jsc.adskeeper.com/r/s/rssing.com.1596347.js" async> </script>