Bootstrap

Ubuntu内安装Hadoop

hadoop的 安装极为繁琐,作者也是在安装了好长的时间下才能成功,以下将分享我的安装经验,我已经尽我所能把每个步骤展示出来,希望所有人能成功。

目录

一. 安装准备

二. 创建hdoop用户

三. 设置ssh密钥

四. 在 Ubuntu 上下载并安装 Hadoop

五. 配置环境

六. 检查hadoop安装是否成功

七. 配置伪分布式

八. 启动Hadoop

九. 其他

十. hadoop的简单操作


一. 安装准备

确保安装好ssh和java11,如果没有它们,请一次运行一个命令来安装它们:

sudo apt update && sudo apt upgrade -y
sudo apt install openssh-server openssh-client -y
sudo apt install openjdk-11-jdk -y

二. 创建hdoop用户

使用以下命令为 Hadoop 创建非 root 用户。这是我们在实际下载和安装Hadoop之前需要做的预配置的一部分。

这是创建了一个名叫hdoop的用户。

sudo adduser hdoop

进入hdoop用户中:

su - hdoop

三. 设置ssh密钥

现在,为了在Ubuntu上安装Hadoop,我们将使用您刚刚创建的Hadoop用户,并使用它来与它建立SSH连接。使用以下命令生成 SSH 密钥对并保存它:

ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
chmod 600 ~/.ssh/authorized_keys
chmod 700 ~/.ssh
ssh localhost

显示如上则成功,如果链接不成功(只有最后一步)则输入:

sudo service  ssh start

四. 在 Ubuntu 上下载并安装 Hadoop

你可以访问官网,寻找喜欢的版本,这里我下载的是3.4.0版本</

;