[hadoop全分布部署]安装Hadoop、验证Hadoop①_查看相应的jvm验证hadoop是否启动成功-程序员宅基地

技术标签: 环境配置  Linux  hdfs  hadoop  大数据  

博主:发量不足

个人简介:耐心,自信来源于你强大的思想和知识基础!!

本期更新内容:安装Hadoop、验证Hadoop①

下篇文章预告:安装Hadoop、验证Hadoop②

 

目录

         验证Hadoop

一、配置hadoop格式化

二、查看 Java 进程

三、查看 HDFS 的报告


 

                                        验证Hadoop

一、配置hadoop格式化

(1) 切换到hadoop用户

    su hadoop

(2)  cd /opt/module/hadoop 

b33b508a9d32459e912a978d48874699.png

 

(3) datanode 格式化 

hdfs namenode -format  

41775db91f894d018dfe01ac0631f39b.png

 

(4)启动 NameNode

hadoop-daemon.sh start namenode  

388c59d9f7b84def91c9baa3e32cffe5.png

 

 

二、查看 Java 进程

(1)  jps  (查看是否启动成功)

(2)  ll /opt/module/hadoop/logs  (日志目录)

925d8e3542a64066884288ed7f031ad7.png

 

 

(3) slave1启动datanode 

ssh slave1 

hadoop-daemon.sh start datanode

jps  (查看是否启动成功)

0cdcec158f0b4e85b3bcb4b37da71ee1.png

 

 

(4) slave2启动datanode 

ssh master

ssh slave2

hadoop-daemon.sh start datanode

jps  (查看是否启动成功)

b62efee2ee994f6ea1674ef8be89b123.png

 

 

(5) 启动 SecondaryNameNode 

ssh master

hadoop-daemon.sh start secondarynamenode

jps  (查看是否启动成功)

ab55183dc28442118bb5e2a18b42c412.png

 

 

(6) 查看 HDFS 数据存放位置

ll /opt/module/hadoop/dfs/

c930342ebae6440ab2869cde3cc3d8bf.png

 

 

三、查看 HDFS 的报告

hdfs dfsadmin -report

 

6fb764e9355b46398879499346544efa.png

 

 

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/m0_57781407/article/details/128360212

智能推荐

华为WLAN AirEngine 9700S AC控制器如何开启双SSID_华为ac9700s-sweb配置教程-程序员宅基地

文章浏览阅读6.2k次。业务场景:家庭大户型上下2层住宅用户通过WLAN接入网络业务需求:扫地机器人只正常2.4G网络,目前默认2.4G和5G频段合二为一,导致扫地机器人不能正常接收命令上传数据,无法正常使用。目的:5G和2.4G信号都单独显示出,让扫地机器人连上2.4G网络AC版本9700S-SV200R020C00SPC300web配置步骤1.配置向导–无线业务–新建SSIDxx5G生效射频只选1(5G)其他参数和现有ssid一样,保存2.更改原有SSIDxx生效射频只保留0(2.4G)其它不变,保存3_华为ac9700s-sweb配置教程

PeakDo毫米波投屏器Hybrid新玩法-程序员宅基地

文章浏览阅读302次。毫米波在如今的网络通信领域可以称得上是第一梯队的高频词汇,作为5G时代的重要组成部分,毫米波是波长为毫米级的电磁波,通常占据了30~300GHz的网络频段,从速度来看,毫米波甚至要比我国现行5G网络普遍使用的Sub-6 GHz还要更快。不过毫米波对信号条件有着更高要求,这也是为什么如今我们能见到的毫米波实际应用并不多。但在室内良好环境下,毫米波技术仍然具备很大的潜力,替代室内场景的各种屏幕HDMI连接线材,就成了毫米波技术首先盯上的领域。在毫米波60GHz频段有着2.4GHz和5.0GHz W._毫米波投屏

超市出了新的活动:4个空汽水瓶可以换1瓶汽水。小明现在手上有n个空汽水瓶,他最多可以换多少瓶汽水喝?_商店规定每4个空瓶可以换一瓶汽水-程序员宅基地

文章浏览阅读1.5k次。#include<stdio.h>int main(){int n;//初始空瓶数int total;//总共喝到的可乐数int m=0;//上一次喝到的可乐数int t=0;//上一次喝完剩下的空瓶数int i=1;//进入循环结构while(i>0)/循环次数,可以自己定义/{total=0;scanf("%d",&n);m=n/4;t=m+n%4;total+=m;while(t>3){m=t/4;t=m+t%4;total+=m;}_商店规定每4个空瓶可以换一瓶汽水

LoadRunner参数化MySQL-程序员宅基地

文章浏览阅读41次。准备:安装【msql-ODBC驱动】一、配置数据源1、Win7,打开控制面板-系统和安全-管理工具,点击“数据源(ODBC)”.打开数据源(ODBC),在用户DSN选项卡中点击“添加”按钮,弹出“创建新数据源”窗口。点击“添加”,如下图:选中“MYSQLODBC5.2 ANSI Driver”,点击“完成”按钮。配置mysql的IP、用户名与密码,如下..._lr11利用mysql进行参数化设计

WCF初探-19:WCF消息协定-程序员宅基地

文章浏览阅读62次。WCF消息协定概述在生成 WCF应用程序时,开发人员通常会密切关注数据结构和序列化问题,而不必关心携带数据的消息结构。 对于这些应用程序,为参数或返回值创建数据协定的过程很简单。但是,有时完全控制 SOAP 消息的结构与控制其内容一样重要。 当必须提供互操作性或需要在消息或消息部分级别特别控制安全问题时,更是如此。 在这些情况下,您可以创建消息协定 ,使您可以指定所需的精确的 SOA...

L2TP/IPSec一键安装脚本-程序员宅基地

文章浏览阅读101次。本脚本适用环境:系统支持:CentOS6+,Debian7+,Ubuntu12+内存要求:≥128M更新日期:2017 年 05 月 28 日关于本脚本:名词解释如下L2TP(Layer 2 Tunneling Protocol)IPSec(Internet Protocol Security)IKEv2 (Internet Key Exchange v2)能实现 IPsec 的目前总体上有 ..._l2tp/ipsec一键安装脚本

随便推点

Qt5/6Windows下使用QSettings操作注册表或者使用WindowsAPI调用Firefox浏览器打开网址_windows api打开网页-程序员宅基地

文章浏览阅读655次。在Windows下操作注册表是程序中常用的操作,这里我们借用浏览器打开网页来看看如何操作注册表,使用的是QSettings类,对于键值对的操作,使用它最为适合了。void MainWindow::on_btnSetDefaultBrowser_clicked(){#ifdef WIN32 QSettings a("HKEY_LOCAL_MACHINE\\SOFTWARE\\Microsoft\\Windows\\CurrentVersion\\App Paths\\firefox.ex_windows api打开网页

SpringBoot单元测试java.lang.IllegalStateException Could not initialize plugin: interface org.mockito解决方案_java.lang.illegalstateexception: could not initial-程序员宅基地

文章浏览阅读2.8w次,点赞40次,收藏42次。本文主要介绍了SpringBoot项目单元测试java.lang.IllegalStateException: Could not initialize plugin: interface org.mockito.plugins.MockMaker,希望能对使用SpringBoot项目单元测试的同学们有所帮助。文章目录1. 问题描述2. 原因分析3. 解决办法_java.lang.illegalstateexception: could not initialize plugin: interface org.

Python淘宝电脑销售数据爬虫可视化分析大屏全屏系统 开题报告-程序员宅基地

文章浏览阅读4.4k次,点赞21次,收藏17次。Python淘宝电脑销售数据爬虫可视化分析大屏全屏系统 开题报告毕设毕业设计作品,从而节省人力、物力,只要会打字即可,不需要很高的学历;综上所述,Python淘宝电脑销售数据爬虫可视化分析大屏全屏系统的研究将为企业和市场参与者提供宝贵的市场洞察和决策支持,促进电脑市场的健康发展和竞争态势的优化。跨文化和方法的借鉴:国外的学者在电子商务、消费者行为等领域的研究,尤其是在跨文化背景下的研究,为国内淘宝电脑销售数据的研究提供了方法上的借鉴和启示。

Simulink如何让仿真时长等于真实时长_simulink 仿真时间与真实时间同步-程序员宅基地

文章浏览阅读3.2k次,点赞10次,收藏23次。Simulink如何让仿真时长等于真实时长在Matlab的帮助文档里找到Pure Pursuit模块的文档,在末尾处打开Path Following with Obstacle Avoidance in Simulink的scripts。在该模型中找到Rate Control模块(如下图),复制该模块并粘贴到你的Simulink模型里。2. 将该模块的参数设置成与你Model Configuration Parameters里的Fix-step size相同的仿真步长(如0.02)。运行该模_simulink 仿真时间与真实时间同步

softmax_cross_entropy_with_logits与sparse_softmax_cross_entropy_with_logits的区别_softmax_cross_entropy_with_logits_v2 spars_softmax-程序员宅基地

文章浏览阅读4.5k次,点赞2次,收藏4次。softmax_cross_entropy_with_logits与sparse_softmax_cross_entropy_with_logits的区别没有sparse:有sparse:对比代码最近学习了Policy Gradients,里面用到了sparse_softmax_cross_entropy_with_logits,很惊诧这是个what,查询了许多资料,做了一点实验,终于明白,这就..._softmax_cross_entropy_with_logits_v2 spars_softmax_cross_entropy_with_logits

2024年腾讯云免费服务器申请入口,个人和企业均可申请-程序员宅基地

文章浏览阅读337次,点赞5次,收藏8次。腾讯云免费服务器申请入口https://curl.qcloud.com/FJhqoVDP免费服务器可选轻量应用服务器和云服务器CVM,轻量配置可选2核2G3M、2核8G7M和4核8G12M,CVM云服务器可选2核2G3M和2核4G3M配置,腾讯云服务器网txyfwq.com分享2024年最新腾讯云免费服务器申请入口、限制条件