云计算实验中要求我们在Linux系统安装Hadoop,故来做一个简单的记录。
· 注:我的操作系统环境是Ubuntu-20.04.3,安装的JDK版本为jdk1.8.0_301,安装的Hadoop版本为hadoop2.7.1。(不确定其他版本是否会出现版本兼容问题)
Hadoop安装步骤如下:
一、更新apt和安装vim编辑器
二、配置本机无密码登录SSH
三、安装JAVA环境
四、下载安装Hadoop
五、伪分布式搭建
一、更新apt和安装vim编辑器
1、更新apt
sudo apt-get update
2、安装vim编辑器
sudo apt-get install vim
apt更新和vim安装可能会有点慢,不用着急。
二、配置本机无密码登录SSH
1、先检查ssh是否已经安装启动【最好检查一下】
sudo ps -ef | grep ssh
2、Ubuntu默认已安装ssh客户端,此外还要安装ssh服务端
sudo apt-get install openssh-server
这里在安装服务端时没有进行截图。但是当时在做这一步时报错了。将最后的报错中的语句添加到这句命令末尾解决了该问题(如果遇到一样的状况可以试试)。
3、安装后登录SSH(首次登陆会有提示,按提示输入yes和用户密码就可以登录了)
ssh localhost
4、退出登录
exit
设置无密码登录,使用ssh-keygen 生成密钥,并将密钥加入到授权中
cd ~/.ssh/
ssh-keygen -t rsa # 什么都不用输,根据提示一直按ENTER就行
cat ./id_rsa.pub >> ./authorized_keys
以上步骤完成后就可以无密码登录SSH了。
三、安装JAVA环境
1、安装JDK
我下载的是jdk1.8.0_301版本,在本机电脑中下载压缩包,将压缩包复制到/home/user【就是桌面上的文件夹】文件夹中,右键解压到当前位置。(就不用终端输命令来进行了)
——这里再说一下从本机复制粘贴的问题。
想要复制粘贴就需要在VMware中安装VMware tools。进入虚拟机后点击“安装VMware tools”,会弹出一个光盘,点进去找到一个压缩包,将他复制到主目录后解压。