HDFS常用命令常用

news/2024/5/20 4:09:29 标签: HDFS, Hadoop
常用HDFS命令说明
hadoop fs -mkdir dir新建HDFS目录dir
hadoop fs -mkdir -p /dir1/dir2/dir3建立多层目录
hadoop fs -ls /Input列出”/Input”目录下的文件和目录
hadoop fs -ls -R /Input列出”/Input”目录下所有子目录及目录里的文件
hadoop fs -copyFromLocal file dir将本地文件file复制到HDFS目录dir下
hadoop fs -put同上,若存在上面会提示,put会直接覆盖
hadoop fs -copyToLocal file dir将HDFS文件file复制到本地目录dir下
hadoop fs -get同上
hadoop fs -cp复制HDFS文件
hadoop fs -rm删除HDFS文件
hadoop fs -cat file显示文件内容
hadoop fs -cat file | more一页一页显示文件内容
hadoop fs -appendToFile 1.txt /input/2.txt将1的内容加入到2.txt的最后
hadoop fs -appendToFile 1.txt 2.txt … /input/1.txt将多个文件追加到1.txt
hadoop fs -cat /input/1.txt在命令行里查看1.txt的内容
hadoop fs -checksum /input/1.txt返回文件的校验和信息
hadoop fs -chgrp [-R] GROUP修改文件的组
更多待补充

http://www.niftyadmin.cn/n/569397.html

相关文章

CSDN博客开通第一文

CSDN博客开通第一文

本人是浙大计算机PHD在读，今天开通CSDN博客，希望在这里记录自己的成长。我的研究方向是信息检索、机器学习，对Web应用、搜索技术、社交网络等许多问题感兴趣：） 以后记录的内容还没有想好，最近有点忙。也许会…
阅读更多...
计算机方向的一些顶级会议和期刊—Top Conferences and Journals in Computer Science

计算机方向的一些顶级会议和期刊—Top Conferences and Journals in Computer Science

计算机科学的论文最大特点在于： 极度重视会议，而期刊则通常只用来做re-publication，也就是说很多期刊文章是会议论文的扩展版，而不是首发的工作。并且期刊的录用到发表中间的等待时间极长，有的甚至需要等上1-2年&…
阅读更多...
matlab绘图的坐标轴数字、范围、间隔控制

matlab绘图的坐标轴数字、范围、间隔控制

matlab绘图的时候只用plot函数出来的图不一定符合自己最想要的格式， 经常要对坐标的数字、范围、间隔做处理。 虽然不是什么很难的操作，但是确实常用，也容易忘记，所以就放在这里说明一下： x (1:50); y sin(x); plot…
阅读更多...
矩阵求导

矩阵求导

维基百科上：http://en.wikipedia.org/wiki/Matrix_calculus ， 根据Y与X的不同类型（实值，向量，矩阵），给出了具体的求导公式，以及一堆相关的公式。其实在实际的机器学习工作中&#xf…
阅读更多...
信息检索X科普一：查准与召回（Precision Recall），F1 Measure

信息检索X科普一：查准与召回（Precision Recall），F1 Measure

好吧，其实我也不是IR专家，但是我喜欢IR，最近几年国内这方面研究的人挺多的，google和百度的强势，也说明了这个方向的价值。当然，如果你是学IR的，不用看我写的这些基础的东西咯。如果你是初学者或…
阅读更多...
机器学习降维算法一：PCA(主成分分析算法)

机器学习降维算法一：PCA(主成分分析算法)

引言： 机器学习领域中所谓的降维就是指采用某种映射方法，将原高维空间中的数据点映射到低维度的空间中。降维的本质是学习一个映射函数 f : x->y，其中x是原始数据点的表达，目前最多使用向量表达形式。 y是数据点映射后的低维向…
阅读更多...
MySQL各种语句

MySQL各种语句

增删改查等、待补充
阅读更多...
matlab 绘图字体大小控制

matlab 绘图字体大小控制

坐标图上有各种数字和文字，因为图的大小关系，经常会需要去调节字体的大小，这里简单列举一下，以后想到了再补充~ 通用方法： 在绘制完成的图里面，点上面的edit plot，之后点你需要改的地方的右键…
阅读更多...
最新文章

Copyright @ 2022~2023