linux – 如何访问Hadoop HDFS中的文件？

发布时间：2020-12-14 01:26:56 所属栏目：Linux 来源：网络整理

导读：我在我想要在 Eclipse中打开的Hadoop HDFS中有一个.jar文件(包含我要修改的Java项目). 当我输入hdfs dfs -ls / user / …我可以看到.jar文件在那里 – 但是,当我打开Eclipse并尝试导入它时,我似乎无法在任何地方找到它.我在文件系统中看到一个hadoop / hdfs

我在我想要在 Eclipse中打开的Hadoop HDFS中有一个.jar文件(包含我要修改的Java项目).

当我输入hdfs dfs -ls / user / …我可以看到.jar文件在那里 – 但是,当我打开Eclipse并尝试导入它时,我似乎无法在任何地方找到它.我在文件系统中看到一个hadoop / hdfs文件夹,它带我到2个文件夹; namenode和namesecondary – 这些都没有我正在寻找的文件.

有任何想法吗？我被困在这一段时间了.在此先感谢您的帮助.

解决方法

HDFS文件系统和本地文件系统都不同.

您可以使用以下命令将jar文件从hdfs文件系统复制到本地filesytem中的首选位置：

bin/hadoop fs -copyToLocal locationOfFileInHDFS locationWhereYouWantToCopyFileInYourFileSystem

例如

bin/hadoop fs -copyToLocal file.jar /home/user/file.jar

我希望这可以帮助你.

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!