在虚拟机上安装Hadoop

以下是在虚拟机上安装Hadoop的一般步骤：

 

准备工作

 

- 安装虚拟机软件：如VMware Workstation或VirtualBox等。

- 创建虚拟机：选择合适的操作系统镜像，如Ubuntu或CentOS等Linux发行版，为虚拟机分配足够的CPU、内存和磁盘空间。

- 安装JDK：Hadoop需要Java环境，使用命令安装OpenJDK，如 sudo apt install openjdk-8-jdk ，安装完成后用 java -version 验证。

 

安装Hadoop

 

- 下载Hadoop：访问Apache Hadoop官方网站，下载适合的版本，也可以使用 wget 命令下载。

- 解压Hadoop：下载完成后，使用 tar -xvf 命令解压，如 tar -xvf hadoop-3.3.1.tar.gz 。

- 配置环境变量：开 .bashrc 或 .bash_profile 文件，在文件末尾添加配置，如 export HADOOP_HOME=/path/to/hadoop-3.3.1 等，将 /path/to/hadoop-3.3.1 替换为实际路径，保存后执行 source 命令使配置生效。

- 配置Hadoop文件：在Hadoop的配置文件夹中有 core-site.xml 、 hdfs-site.xml 、 mapred-site.xml 和 yarn-site.xml 等文件，根据需求修改，如指定NameNode和DataNode的路径、设置内存大小等。

 

启动与验证

 

- 启动Hadoop：在终端执行 start-dfs.sh 启动HDFS服务，执行 start-yarn.sh 启动YARN服务。

- 验证安装：在浏览器中访问Hadoop的Web界面，HDFS默认地址为 http://localhost:9870 ，YARN为 http://localhost:8088 ，能看到相应界面表明安装成功。