Ambari自动部署Hadoop 目标 能够了解Ambari应用场景 能够了解Ambari功能 能够安装并配置Ambari Server 能够安装并配置Ambari Agent 能够通过Ambari实现Hadoop集群自动部署 能够掌握Ambari自动部署的Hadoop集群使用测试 1)Ambari介绍 Apache Ambari项目旨在通过开发用于配置，管理和监控Apache Hadoop集群的软件来简化Hadoop管理。Ambari提供了一个由RESTful API支持的直观，易用的Hadoop管理Web UI…
完全分布式部署介绍 完全分部式是真正利用多台Linux主机来进行部署Hadoop，对Linux机器集群进行规划，使得Hadoop各个模块分别部署在不同的多台机器上 架构 主机名 IP 角色 hd1 192.168.139.31 NameNode hd2 192.168.139.32 NameNode hd3 192.168.139.33 ResourceManager hd4 192.168.139.34 DataNode;NodeManager;Zookeeper;Journalnode hd5 192.168.…
1.1 集群环境准备 1.1.1 同步时间 ntpdate -u ntp.aliyun.com 1.1.2 配置selinux vi /etc/sysconfig/selinux #返回信息中有以下内容，表示打开成功： # This file controls the state of SELinux on the system. # SELINUX= can take one of these three values: # enforcing - SELinux security policy is e…
伪分布部署 伪分布式部署模式介绍 Hadoop守护进程运行在本地机器上，模拟一个小规模的的集群。 该模式在单机模式之上增加了代码调试功能，允许你检查内存使用情况，HDFS输入/输出，以及其他的守护进程交互。 1）上传相应的jar包 下载包的相应网址： https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ https://www.oracle.com/java/technologies/downloads/ [root@hadoop-pseudo src…
单机部署 单机部署模式介绍 单机(本地模式)是Hadoop的默认部署模式。 当配置文件为空时，Hadoop完全运行在本地。 不需要与其他节点交互，单机(本地模式)就不使用HDFS，也不加载任何Hadoop的守护进程。 该模式主要用于开发调试MapReduce程序的应用逻辑。 单机(本地模式)是Hadoop的默认部署模式。 当配置文件为空时，Hadoop完全运行在本地。 不需要与其他节点交互，单机(本地模式)就不使用HDFS，也不加载任何Hadoop的守护进程。 该模式主要用于开发调试MapReduce程序的应用逻辑…
日历
| 周一 | 周二 | 周三 | 周四 | 周五 | 周六 | 周日 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | |||
| 5 | 6 | 7 | 8 | 9 | 10 | 11 |
| 12 | 13 | 14 | 15 | 16 | 17 | 18 |
| 19 | 20 | 21 | 22 | 23 | 24 | 25 |
| 26 | 27 | 28 | 29 | 30 | 31 | |