彷徨 | HDFS客户端基本shell操作

news/2024/5/20 1:29:53 标签: shell, HDFS, 基本操作

# HDFSshell练习

# hdfs version 查看HDFS版本

# hadoop fs -ls /  查看HDFS根目录下的文件和目录

# hdfs dfs -ls -R /这条会列出/目录下的左右文件,由于有-R参数,会在文件夹和子文件夹下执行ls操作 , 会递归

# hadoop fs -mkdir /test 在根目录创建一个目录test

# hdfs dfs -cat /hdfs-mgmt.sh  查看hdfs文件中的内容

# hdfs dfs -copyToLocal  /hdfs-mgmt.sh  下载,即把文件复制到本地

# hdfs dfs -rm -f /hdfs-mgmt.sh  删除文件

# hadoop fs -put ./zhang / 或 # hadoop fs -copyFromLocal ./zhang /  上传文件

# hadoop fs -get /zhang  下载文件

# hadoop fs -rm /zhang

# hadoop fs -mv /test/test.txt /test1

# hadoop fs -rmr /test1

等等,更多的命令请看http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html

HDFS基本shell操作

在客户端输入Hadoop fs,可以查看所有的,hadoop shell

# -help [cmd] //显示命令的帮助信息,如: hadoop fs -help ls

# -ls(r) <path>      //显示当前目录下所有文件,path是hadoop下的路径,如:/shikun/file

# -du(s) <path>    //显示目录中所有文件大小

# -count[-q] <path>     //显示目录中文件数量

# -mv <src> <dst> //移动多个文件到目标目录

# -cp <src> <dst>  //复制多个文件到目标目录

# -rm(r)         //删除文件(夹)

# -put <localsrc> <dst>       //本地文件复制到hdfs

# -copyFromLocal //同put

# -moveFromLocal       //从本地文件移动到hdfs

# -get [-ignoreCrc] <src> <localdst>  //复制文件到本地,可以忽略crc校验

# -getmerge <src> <localdst>             //将源目录中的所有文件排序合并到一个文件中

# -cat <src>   //在终端显示文件内容

# -text <src>  //在终端显示文件内容

# -copyToLocal [-ignoreCrc] <src> <localdst>  //复制到本地

# -moveToLocal <src> <localdst>

# -mkdir <path>   //创建文件夹

# -touchz <path>  //创建一个空文件


http://www.niftyadmin.cn/n/753054.html

相关文章

JavaScript函数的默认参数(default parameter)

JavaScript函数的默认参数(default parameter) js函数参数的默认值都是undefined&#xff0c; ES5里&#xff0c;不支持直接在形参里写默认值。所以&#xff0c;要设置默认值&#xff0c;就要检测参数是否为undefined&#xff0c;按需求赋值。 function multiply(a, b) {b typ…

图片加载失败后的处理

$(".headImg img").error(function() {$(".headImg img").attr("src", "images/defaultHead.jpg");//加载默认图片$(".headImg img").error(null); //防止死循环})$("#serverItems img").error(function() {var i…

彷徨 | MobaXterm的安装和使用

官网:https://mobaxterm.mobatek.net/ 百度云:链接&#xff1a;https://pan.baidu.com/s/1cEut7cBDU5yZWQtUW8vBDQ 密码&#xff1a;inuw 1.先来看看SSH是什么&#xff0c;定义如下&#xff1a; SSH是一种可以保证用户远程登录到系统的协议。实际上&#xff0c;SSH是一个网络…

I帧、P帧、B帧、GOP、IDR 和PTS, DTS之间的关系

一.视频传输原理 视频是利用人眼视觉暂留的原理&#xff0c;通过播放一系列的图片&#xff0c;使人眼产生运动的感觉。单纯传输视频画面&#xff0c;视频量非常大&#xff0c;对现有的网络和存储来说是不可接受的。为了能够使视频便于传输和存储&#xff0c;人们发现视频有大量…

图片上传(ajax通过base64格式的字符串方式上传图片至服务端)

&#xff08;1&#xff09;getBase64(imgPath);//path为img路径 &#xff08;2&#xff09;function getBase64(imgPath) { //图片转base64 function getBase64Image(img, width, height) { //width、height调用时传入具体像素值&#xff0c;控制大小 ,不传则默认图像大小 …

洛谷P5292 [HNOI2019]校园旅行(二分图+最短路)

题面 传送门 题解 如果暴力的话&#xff0c;我们可以把所有的二元组全都扔进一个队列里&#xff0c;然后每次往两边更新同色点&#xff0c;这样的话复杂度是\(O(m^2)\) 怎么优化呢&#xff1f; 对于一个同色联通块&#xff0c;如果它是一个二分图&#xff0c;我们只要保留一棵生…

彷徨 | HDFS的安全模式

HDFS运行机制、原理深入 namenode的安全模式&#xff1a; namenode一旦进入安全模式&#xff0c;就无法再操作hdfs中的文件&#xff08;上传、删除、改名、下载&#xff09;,只是可以查看目录 namenode进入安全模式的原因&#xff1a; namenode机器的资源问题&#xff08;磁…

WPS使用书签跳转到指定的文档位置

1、选择跳转到的位置的文本&#xff0c;菜单栏插入中点击书签&#xff0c;弹出框中输入书签名&#xff0c;点击确定&#xff1b; 2、选择超链接的文本&#xff0c;右键点击超链接&#xff0c;弹出框中点击本文档中的位置&#xff0c;选择刚输入的书签&#xff0c;点击确定即可。…