Hadoop HA集群怎么格式化namenode?

news/2024/5/20 5:09:40 标签: hadoop, hdfs, 大数据

http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWithNFS.html

1)停止Hadoop集群

2)在所有服务器上执行命令行

rm -rf /home/user/hadoop-3.2.2/tmp/*
rm -rf  /home/user/hadoop-3.2.2/journal/ns1/*

3)确保所有的服务器上zkServer,以及Hadoop Journal Node都在运行

[user@NewBieSlave2 ~]$ zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /home/user/apache-zookeeper/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[user@NewBieSlave2 ~]$ zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /home/user/apache-zookeeper/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost. Client SSL: false.
Mode: follower

[user@NewBieSlave2 ~]$ /home/user/hadoop-3.2.2/sbin/hadoop-daemon.sh start journalnode

4)在Hadoop的主服务器66上执行格式化命令行

hadoop namenode -format

5)启动Hadoop集群。


http://www.niftyadmin.cn/n/876886.html

相关文章

大数据项目实战---电商埋点日志分析(第三部分,DWD层初步解析)

构建DWD层 1)创建表dwd_start_log 2)创建表dwd_event_log 往DWD层加载数据 1)往表dwd_start_log中加载数据。 2)往表dwd_event_log中加载数据。 2.1)创建UDF和UDTF ,将生成的jar 传到hive所在的服务器88。 https://blog.csdn.n…

HIVE中UDF的使用

1&#xff09;创建Maven工程 2&#xff09;项目pom.xml文件中添加hive的依赖。 <dependency><groupId>org.apache.hive</groupId><artifactId>hive-exec</artifactId><version>2.3.8</version></dependency> 3) 创建类BaseFi…

HIVE中UDTF的使用

1&#xff09;创建Maven工程 2&#xff09;项目pom.xml文件中添加hive的依赖。 3) 创建类EventJsonUDTF.

大数据项目实战---电商埋点日志分析(第四部分,DWD层深度解析)

1&#xff09;创建加载表dwd_display_log 2&#xff09;创建加载表dwd_newsdetail_log 3&#xff09;创建加载表dwd_loading_log 4&#xff09;创建加载表dwd_ad_log 5&#xff09;创建加载表dwd_notification_log 6&#xff09;创建加载表dwd_for_activity_log 7&#xff09;创…

大数据项目实战---电商埋点日志分析(第五部分,DWS层之用户活跃主题)

1&#xff09;创建用户按天明细表&#xff0c;dws_uv_detail_day并加载数据。 2&#xff09;创建用户按周明细表&#xff0c;dws_uv_detail_wk并加载数据。 3&#xff09;创建用户按月明细表&#xff0c;dws_uv_detail_mn并加载数据。 下一章 https://blog.csdn.net/hailunw/ar…

大数据项目实战---电商埋点日志分析(第六部分,ADS层之用户活跃主题)

大数据项目实战---电商埋点日志分析&#xff08;第六部分&#xff0c;ADS层之用户活跃主题&#xff09; 创建用户活跃汇总表ads_uv_account并加载数据。 下一章 https://blog.csdn.net/hailunw/article/details/118609254

大数据项目实战---电商埋点日志分析(第七部分,每日新增设备主题(DWS层+ADS层)

1&#xff09;创建设备按天明细表&#xff0c;dws_new_mid_day并加载数据。 2&#xff09;创建每日新增设备表&#xff0c;ads_new_mid_count并加载数据。 下一章 https://blog.csdn.net/hailunw/article/details/118611510

大数据项目实战---电商埋点日志分析(第八部分,用户留存主题(DWS层+ADS层)

1&#xff09;创建每日留存用户明细表dws_user_retention_day并加载数据。 2&#xff09;创建每日留存用户数表ads_user_retention_day_count并加载数据。 3)创建每日留存用户比例表ads_user_retention_day_rate并加载数据 为了能够尽快地找到新工作&#xff0c;这个项目先到这…