`
jishublog
  • 浏览: 869002 次
文章分类
社区版块
存档分类
最新评论

Hadoop安全云盘开发(第3篇)

 
阅读更多

第3篇

环境搭建完毕后,我们开始迫不急待地投入到项目的开发中。首先要解决的问题是如何在java代码中调用Hadoop HDFS Java API,对文件进行操作,包括文件的上传、下载、删除和移动等。其实这些操作并不困难,只要在网上搜一下,就有大量的例子代码,稍加修改,将相关参数改成本机的配置便可以完成。但是,在具体的实施之中,还是遇到了一些棘手的问题。我把网上下载的代码改好后,一运行就会报错。
这个问题可把我们难住了,我们一直以为是代码的错误,将代码一改再改,浪费了大约5天的时间,才把这个问题解决。我们仔细看了报出的错误,主要是涉及到一些权限的问题。原来由于Eclipse使用hadoop插件交作业时,会默认以DrWho身份将作业写入HDFS文件系统中,对应的也就是HDFS上的/user/hadoop,由于用户DrWho对目录并没有写入权限,所以会导致异常发生。需要在命令行中执行获取权限操作:$./hadoopfs-chmod777/。
这样,我们就顺利地在java代码中调用了Hadoop HDFS Java API。
分享到:
评论

相关推荐

Global site tag (gtag.js) - Google Analytics