创建HDFS,导入HADOOP jar包

news/2024/5/20 2:57:47 标签: hadoop, 大数据, jar, hdfs

创建HDFS,导入HADOOP 所有jar

1、打开eclipse

点击
在这里插入图片描述

2、新建java project:

在这里插入图片描述
选择自己安装的jdk版本(老版本容易出bug)

3、在hadoop工程下新建文件夹lib(用于存放jar包)

在这里插入图片描述

4、导入jar

第一个jar
cp /opt/modules/app/hadoop-2.8.5/share/hadoop/hdfs/hadoop-hdfs-2.8.5.jar /home/cwz/workspace/hadoop/lib/

第二个jar
cp /opt/modules/app/hadoop-2.8.5/share/hadoop/hdfs/lib/* /home/cwz/workspace/hadoop/lib/

第三个jar
cp /opt/modules/app/hadoop-2.8.5/share/hadoop/common/hadoop-common-2.8.5.jar /home/cwz/workspace/hadoop/lib/

第四个jar
cp /opt/modules/app/hadoop-2.8.5/share/hadoop/common/lib/* /home/cwz/workspace/hadoop/lib/

以上可能会出现重复的jar包导入,直接覆盖即可

5、将jar包导入工程
右键hadoop工程,选择最后的Configure Bulid Path
在这里插入图片描述

选择第三个选项卡,点击 Add External JARS
在这里插入图片描述
选择你的导入路径,全选后确定,即可


http://www.niftyadmin.cn/n/1585710.html

相关文章

采用云计算容器的四个建议

在IT行业中,云计算容器不会很快消失。采纳并保持你的容器高效运行,请遵循以下四点建议和提示。 主导云计算市场作的云容器技术将作为为传统的基于管理程序的虚拟化一种替代。容器是轻载的,提供增强的可移植性,可以应用到移动平台之…

Java 公约数算法/欧几里德算法

import java.io.BufferedReader; import java.io.InputStreamReader;/* 最大公约数 (GCD) */public class Solution {public static void main(String[] args) throws Exception {BufferedReader reader new BufferedReader(new InputStreamReader(System.in));int number_a …

大数据时代隐私咋保护 专家:技术、立法和管理

核心提示 “大数据”时代下,人们在享受大数据带来便捷的同时,数据泄露事件,数据安全、公民的隐私权保护问题成为大数据时代的最大隐忧。 在“第二届中国大数据安全高层论坛”、“数据安全与个人隐私保护论坛”、“中国智慧城市数据安全与产业…

mac版 SimHei添加教程

mac版本matplotlib SimHei配置 一、环境描述 python 3.7 mac 10.15.4 二、问题描述 使用matplotlib绘制图片的时候,所有的中文字符无法正常显示。 三、解决方法 1、下载字体ttf文件 链接:https://pan.baidu.com/s/1RLVvbIi_NpAiiycBYQRPCQ 密码:n1sv 2、找到配置…

从钉钉广告攻占鹅厂看企业级市场谁胜算大

昨天,ZOL一篇《阿里钉钉攻入鹅厂后院 马化腾如何接招?》引起了广泛关注,网友发表了很多声音,整个事件讲述了腾讯总部附近的深大地铁站内,出现了阿里巴巴“钉钉”的广告,让企业级社交领域的竞争多了一分“火…

物联网发展的尴尬境况:理想与现实仍有差距

大数据不仅是一种庞大数据资料的称谓,也是一种获取和分析资料的方法。在社会学研究领域,大数据的引入被认为是定量研究的范式下所做出的收集和分析资料方法的创新。但是大数据在多大程度上反映人群的状况、能否解决被研究者的主观性问题、如何洞悉变量间…

《Node.js区块链开发》——3.6 总结

本节书摘来自华章计算机《Node.js区块链开发》一书中的第3章,第3.6节,作者 朱志文,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.6 总结 本章介绍了目前区块链产品普遍采用的共识机制,这里没有介绍瑞波币采用的瑞波…

扎克伯格防黑客偷窥有妙招:用胶带

据外媒报道,如果你是全球最富有的人之一并且还在科技领域有着举足轻重的地位,那么你将如何保护自己不受到黑客的偷窥呢?马克-扎克伯格看起来能给你一个不错的建议--用胶带。日前,扎克伯格在Facebook上传了一张照片庆祝Instagram月用户数量达…