安装CDH平台的服务器磁盘满了,磁盘清理过程记录

news/2024/5/20 4:51:43 标签: hive, hadoop, 数据仓库, hdfs

1.使用hdfs命令查看哪个文件占用最大

hdfs dfs -du -h /tmp

2.我的服务器上显示/tmp/hive/hive文件夹下的,一串字符串命名的文件特别大几乎把磁盘占满了

网上查到/tmp文件是临时文件,由于hiveserver2任务运行异常导致缓存未删除,正常情况下是会自动删除的[参考文章],所以直接命令删除

hdfs dfs -rm -r -skipTrash /tmp/hive/hive/xxxxxxxx(一串字符的文件名)


http://www.niftyadmin.cn/n/5423386.html

相关文章

Python 初学者容易踩的 5 个坑

不明显的字符串拼接 Python 在词法分析的时候会把多个字符串自动拼接起来。 data "very""lazy" print(data) # verylazy 这个特性可以让我们在声明一个长字符串的时候可以分成多行来写,这样看起来比较优雅。 msg ("I want this to be …

【微服务学习笔记(一)】Nacos、Feign、Gateway基础使用

【微服务学习笔记(一)】Nacos、Feign、Gateway基础使用 总览Nacos安装配置Nacos注册中心服务多级存储模型负载均衡规则环境隔离 配置管理配置拉取配置热更新多服务共享配置 Feign远程调用配置性能优化Fegin使用 统一网关Gateway搭建网关路由断言工厂&…

数据库系统概念(第一周)

⚽前言 🏐四个基本概念 一、数据 定义 种类 特点 二、数据库 三、数据库管理系统(DBMS) 四、 数据库系统(DBS) 🏀数据库系统和文件系统对比 文件系统的弊端 🥎数据视图 数据抽象 …

关于Mac宿主机无法ping通Docker容器的问题

https://www.cnblogs.com/luo-c/p/15830769.html 1.首先 Mac 端通过 brew 安装 docker-connector brew install wenjunxiao/brew/docker-connector 2.手动修改 /usr/local/etc/docker-connector.conf 文件中的路由(也可使用博客中的命令自动配置)&#…

1_springboot_shiro_jwt_多端认证鉴权_Shiro入门

1. Shiro简介 Shiro 是 Java 的一个安全框架,它相对比较简单。主要特性: Authentication(认证):用户身份识别,通常被称为用户“登录”,即 “你是谁”Authorization(授权&#xff…

【深度学习笔记】7_4 动量法momentum

注:本文为《动手学深度学习》开源内容,部分标注了个人理解,仅为个人学习记录,无抄袭搬运意图 7.4 动量法 在7.2节(梯度下降和随机梯度下降)中我们提到,目标函数有关自变量的梯度代表了目标函数…

MySQL--优化(索引--聚簇和非聚簇索引)

MySQL–优化(索引–聚簇和非聚簇索引) 定位慢查询SQL执行计划索引 存储引擎索引底层数据结构聚簇和非聚簇索引索引创建原则索引失效场景 SQL优化经验 一、聚簇索引 聚簇索引:将数据存储与索引放到了一块,索引结构的叶子节点保存…

vb oe20.03 ssh nat

环境 virtual boxopeneuler 20.03 LTS网络设置 nat 主机端口可以自行设置,其余三项固定不变。然后即可通过ssh进行连接。