Skip to content

使用docker搭建大数据环境,及其使用方法

Notifications You must be signed in to change notification settings

Liuyang0001/docker-hadoop

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

17 Commits
 
 
 
 
 
 

Repository files navigation

Instruction


使用docker进行构建单机伪分布式hadoop环境。

  • hadoop版本:2.7.7
  • spark版本:3.1.1
  • jdk版本:1.8
  • hive版本:待添加
  • Hbase版本:1.4.13

ps:请先确保wsl或者linux虚拟机中的 git 、docker 和 make 是可用的。

wsl安装指南点击这里

wsl安装docekr点击这里

镜像内的用户密码为:qwe


使用方法

  1. clone本仓库到你的本地

git clone git@github.com:Liuyang0001/docker-hadoop.git
  1. 使用make进行docker镜像下载

进到仓库目录下:

cd docker-hadoop

使用make语句进行拉取docker镜像:

make pull
  1. 启动镜像

make up

  1. 进入镜像

make bash

启动hadoop伪分布式:

cd ~/onekey
sh run.sh

打开网址查看:

http://localhost:50070/

关闭hadoop集群

sh ~/onekey/stop.sh #关闭hadoop
exit # 退出bash

  1. 退出并解除容器

make down


Enjoy it.

About

使用docker搭建大数据环境,及其使用方法

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published