快速搭建Hadoop集群

全网独家收藏的大数据学习环境

此版本为CDH 官网提供,小编早期独家收藏,便于快速学习的版本。目前已经没有了。

默认情况下,Cloudera快速启动VM在Linux的服务和配置管理下运行Cloudera的发行版,包括Apache Hadoop (CDH)。如果您希望迁移到Cloudera Manager,您必须运行以下命令之一。

要使用Cloudera Express(免费),可以在桌面上运行Launch Cloudera Express。这需要至少8gb的RAM和至少2个虚拟cpu。

要开始一个具有先进管理功能的为期60天的Cloudera Enterprise试用版,请在桌面上运行Launch Cloudera Enterprise(试用版)。这需要至少10gb的RAM和至少2个虚拟cpu。

请注意,在重启之后,Cloudera Manager可能需要几分钟时间才能启动它管理的所有服务,并准备好接受来自客户端的连接。

环境要求

  • 内存 8G
  • CPU 最少2个
  • 空间 64GB
  • Vmware

VM安装

0、下载

VMware Workstation Pro 确立了在单台 Linux 或 Windows PC 上运行多个操作系统的行业标准。

Workstation 15.5 Pro 通过提供全新的用户界面控件,支持巨型帧以及最新的 Windows 和 Linux 操作系统等,进一步完善了领先的桌面…

链接直达:

https://www.vmware.com/cn/products/workstation-pro/workstation-pro-evaluation.html

1、以管理员身份运行

找到下载的程序,右击

2、下一步

3、接收协议

4、更改安装目录

5、安装

点击下一步,点击安装

6、完成

许可证

激活密钥

UY758-0RXEQ-M81WP-8ZM7Z-Y3HDA

VM使用

0、启动

1、更改存储位置

2、更改共享位置

3、虚拟网络

虚拟机网络相关配置

详细设置

cloudera

cloudera-quickstart-vm-5.13.0-0-vmware (目前已经不可下载)

https://www.cloudera.com/products/open-source/apache-hadoop/key-cdh-components.html

VM快速学习

目前最高版本是 5.16

https://docs.cloudera.com/documentation/enterprise/5-16-x/topics/cloudera_quickstart_vm.html

1、导入虚拟机

2、编辑虚拟机设置

最低配置: **4G,4G ,4G **—- 4G 1cores 64GB

小编配置: 8G 2cores 64GB

3、开启虚拟机

4、项目成功启动

等候片刻,根据机器配置来讲,成功创建。如下图

打开浏览器 如果你配置了ip,可以在外部浏览器打卡的。

点击 Cloudera Express

启动成功

5、更改IP

centos ip更改

默认值:

DEVICE="eth0"
BOOTPROTO="dhcp"
DHCP_HOSTNAME="quickstart.cloudera"
HOSTNAME="quickstart.cloudera"
HWADDR="00:0C:29:D3:4D:5C"
IPV6INIT="no"
MTU="1500"
NM_CONTROLLED="yes"
ONBOOT="yes"
TYPE="Ethernet"
UUID="f127faf3-7a1f-4bca-a404-0119665a8459"

注意:使用sudo

 sudo vim /etc/sysconfig/network-scripts/ifcfg-eth0 

修改为:

DEVICE="eth0"
BOOTPROTO="static"
DHCP_HOSTNAME="quickstart.cloudera"
HOSTNAME="quickstart.cloudera"
HWADDR="00:0C:29:D3:4D:5C"
IPV6INIT="no"
MTU="1500"
NM_CONTROLLED="yes"
ONBOOT="yes"
TYPE="Ethernet"
UUID="f127faf3-7a1f-4bca-a404-0119665a8459"
IPADDR=192.168.6.6
NETMASK=255.255.255.0

重新启动即可:

sudo service network restart

6、启动异常解决方案

异常解决

image-20200501093409630

重新添加网卡

image-20200501093456619

复制MAC地址:

image-20200501094007166

更改:

  1. DEVICE = eth2
  2. HWADDR —- 为你的地址值

image-20200501093303582

再次重新启动

1.重启服务
sudo service network restart

2.查看ip
ip addr/ifconfig

image-20200501094403920

MobaXterm

1、安装

MobaXterm

https://mobaxterm.mobatek.net/download-home-edition.html

image-20200430232141238

2、启动

image-20200430231358860

3、配置

image-20200501094919514

4、登录

输入密码,保存。

image-20200501094730836

5、查看

image-20200501095056624

相关安装包,请联系小编获取。

欢迎访问 小编博客 : www.a2data.cn
全力打造 SQL社区: www.sqlsq.cn

评论