博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(4)...
阅读量:5795 次
发布时间:2019-06-18

本文共 367 字,大约阅读时间需要 1 分钟。

hot3.png

7,在SparkWorker1和SparkWorker2上完成和SparkMaster同样的Hadoop 2.2.0操作,建议使用SCP命令把SparkMaster上安装和配置的Hadoop的各项内容拷贝到SparkWorker1和SparkWorker2上;

8,启动并验证Hadoop分布式集群

第一步:格式化hdfs文件系统:

142805_fZFp_1791057.png

142805_Iy4K_1791057.png

142806_57kA_1791057.png

第二步:进入sbin中启动hdfs,执行如下命令:

142806_Nz15_1791057.png

启动过程如下:

142807_9CBV_1791057.png

此时我们发现在SparkMaster上启动了NameNode和SecondaryNameNode;

在SparkWorker1和SparkWorker2上均启动了DataNode:

142807_b62X_1791057.png

142807_s6gQ_1791057.png

此时访问 登录Web控制可以查看HDFS集群的状况:

142808_OuR4_1791057.png

142808_pOIB_1791057.png

142810_Dw25_1791057.png

转载于:https://my.oschina.net/u/1791057/blog/332848

你可能感兴趣的文章
Spring框架中文件上传
查看>>
开源 java CMS - FreeCMS2.5 自定义表单
查看>>
对于《机器学习实战》中逻辑斯谛回归算法公式理解
查看>>
图解YUV420
查看>>
排序算法----插入排序、归并排序
查看>>
vim编辑器的主要内容
查看>>
阅读sqlmap源代码,编写burpsuite插件--sqlmapapi(二)
查看>>
Java后端学习路线图,你真的只需要这一张!
查看>>
android内置数据库的一个错误解决方案:Can't upgrade read-only d...
查看>>
python字符串处理方法(一)
查看>>
php dede 织梦 帝国cms 循环输出选项卡子栏目
查看>>
PHP编程解答2018刑侦推理试题
查看>>
centos6.6安装git2.x
查看>>
Android Studio出现:Your project path contains non-ASCII 错误代码解决方法
查看>>
Linux无法启动(二)
查看>>
弹出框登陆
查看>>
drdb+heartbeat+nfs实现Linux高可用群集(HA)
查看>>
linux下Cacti网络监控之监控apache服务器
查看>>
java编程思想(第四版)第二章练习题-10
查看>>
机遇和回调
查看>>