行业资讯 2025年08月6日
0 收藏 0 点赞 609 浏览 739 个字
摘要 :

我们在使用Java API测试从Liunx上HDFS中下载文件到本地windows系统时,发现会包如下错误: Exception in thread “main” java.lang.RuntimeException: java.i……

我们在使用Java API测试从Liunx上HDFS中下载文件到本地windows系统时,发现会包如下错误:

Exception in thread “main” java.lang.RuntimeException: java.io.FileNotFoundException: java.io.FileNotFoundException: HADOOP_HOME and hadoop.home.dir are unset. -see https://wiki.apache.org/hadoop/WindowsProblems
at org.apache.hadoop.util.Shell.getWinUtilsPath(Shell.java:736)
原因:

日志描述内容很清楚,没有设置 HADOOP_HOMEhadoop.home.dir 两项。这两项主要是干嘛的呢?是配置在本地环境变量中的 Hadoop 地址,而我们本地并没有搭建hadoop环境,因此出错。但是由于我们是远程连接Linux上的Hadoop集群,则完全不需要再下载安装Windows版本的Hadoop

解决

本地远程连接Hadoop系统时需要在本地配置相关的Hadoop变量,主要包括hadoop.dll winutils.exe 等。
1)下载winutils:https://github.com/steveloughran/winutils

注:若无相同的版本,可选择就近的版本下载使用,我这里是下载的hadoop-3.0.0

2)将环境变量HADOOP_HOME设置为指向包含WINUTILS.EXE的bin目录上方的目录
3)将文件夹中hadoop.dll文件复制粘贴进C:\\Windows\\System32
然后再去执行发现问题解决。

微信扫一扫

支付宝扫一扫

版权: 转载请注明出处:https://www.zuozi.net/7924.html

管理员

相关推荐
2025-08-06

文章目录 一、Reader 接口概述 1.1 什么是 Reader 接口? 1.2 Reader 与 InputStream 的区别 1.3 …

988
2025-08-06

文章目录 一、事件溯源 (一)核心概念 (二)Kafka与Golang的优势 (三)完整代码实现 二、命令…

465
2025-08-06

文章目录 一、证明GC期间执行native函数的线程仍在运行 二、native线程操作Java对象的影响及处理方…

348
2025-08-06

文章目录 一、事务基础概念 二、MyBatis事务管理机制 (一)JDBC原生事务管理(JdbcTransaction)…

456
2025-08-06

文章目录 一、SnowFlake算法核心原理 二、SnowFlake算法工作流程详解 三、SnowFlake算法的Java代码…

517
2025-08-06

文章目录 一、本地Jar包的加载操作 二、本地Class的加载方法 三、远程Jar包的加载方式 你知道Groo…

832
发表评论
暂无评论

还没有评论呢,快来抢沙发~

助力内容变现

将您的收入提升到一个新的水平

点击联系客服

在线时间:08:00-23:00

客服QQ

122325244

客服电话

400-888-8888

客服邮箱

122325244@qq.com

扫描二维码

关注微信客服号