java遍历hdfs路径信息,报错EOFException

news/2024/5/20 1:56:17 标签: hdfs, hadoop, java

文章目录

  • 代码

代码

java"> FileSystem fs=FileSystem.get(
                    new URI("hdfs://192.168.20.91:9000"), new Configuration(), "hdfs");
            ContentSummary in = fs.getContentSummary(new Path(
                    "/apps/hbase/data/data/default"));

在这里插入图片描述
在这里插入图片描述
报错原因:指定的hdfs端口号或路径不对,不是9000而是8020,也不是所谓hadoop路径下的slaves或者workers没有配置DNS域名解析对问题
网上有传未配置DNS映射导致报错,这个需要自己详细排查,因为我的不是这个原因报错,详情看https://www.cnblogs.com/dreamzj/p/13602573.html

解决办法:进入linux的hadoop路径下 /etc/hadoop/core-site.xml,查看具体的namenode的端口号,该端口号就是主入口
在这里插入图片描述

在这里插入图片描述


http://www.niftyadmin.cn/n/898339.html

相关文章

linux的进程cron占很多CPU,linux – Kondemand进程占用了我的大部分CPU

以下是顶部的输出:PID USER PR NI VIRT RES SHR S %CPU %MEM TIME COMMAND3551 mysql 20 0 10.0g 84m 4052 S 9.4 0.1 544:39.87 mysqld2311 root 20 0 0 0 0 R 3.1 0.0 184:36.36 kondemand/262296 root 20 0 0 0 0 R 3.0 0.0 183:58.76 kondemand/112297 root 20 …

java操作hbase报错:KeeperErrorCode=NoNode for /hbase-unsecure/master

/*** 生成连接* * param jdbcDataSource* 连接信息* throws IOException* 连接异常*/private void getDataSource(JdbcDataSource jdbcDataSource) throws IOException {String[] zkAdress jdbcDataSource.getZkAddress().split(CommonConstants.SPLIT…

装linux系统的工具箱,PE,Dos工具箱,自动安装linux的U盘制作

我的制作环境说明一、使用syslinux将U盘制作为引导盘1.1 打开cmd,进入syslinux-6.03\bios\win32,并安装syslinux引导程序1. 使用U盘格式化工具FormatTool.exe将U盘格式化为ntfs的格式,因为fat不支持大于4G的单个文件2. cd syslinux-6.03\bios\win323. sy…

@Update注解批量更新始终报错

文章目录报错信息:代码连接数据库时allowMultiQueriestrue的作用报错信息: org.springframework.jdbc.BadSqlGrammarException: ### Error updating database. Cause: java.sql.SQLSyntaxErrorException: You have an error in your SQL syntax; chec…

springboot配置hosts文件

文章目录JVM虚拟DNS&#xff0c;开发期间可以省去hosts文件配置JVM虚拟DNS&#xff0c;开发期间可以省去hosts文件配置 共三步&#xff1a; 第一步&#xff1a;引入依赖 <dependency><groupId>io.leopard</groupId><artifactId>javahost</artifac…

mini2440移植linux内核,mini2440的 linux内核移植

mini2440的linux内核移植电脑主机系统&#xff1a;Ubuntu 9.04 mini2440开发板bootloader&#xff1a;supervivi交叉编译器使用友善之臂提供的符合EABI标准的交叉编译器arm-linux-gcc-4.3.21.首先到http://www.doczj.com/doc/8c66c043b307e87101f6964b.html/去下载内核源码。我…

java读取linux服务器下某文档的内容

文章目录使用步骤&#xff1a;依赖配置文件代码使用步骤&#xff1a; 共3步&#xff1a; 第一步&#xff1a;添加依赖 第二步&#xff1a;配置文件 第三步&#xff1a;代码调用 依赖 <!--java读spark--><dependency><groupId>ch.ethz.ganymed</groupId…

linux命令 磁盘读写,Linux查看磁盘读写的方法

首先 、用top命令查看top - 16:15:05 up 6 days, 6:25, 2 users, load average: 1.45, 1.77, 2.14Tasks: 147 total, 1 running, 146 sleeping, 0 stopped, 0 zombieCpus): 0.2% us, 0.2% sy, 0.0% ni, 86.9% id, 12.6% wa, 0.0% hi, 0.0% siMem: 4037872k tot…