欢迎光临
我们一直在努力

基于Docker搭建Hadoop数据计算集群

本站教程收集整理的这篇文章主要介绍了基于Docker搭建Hadoop数据计算集群,本站教程本站觉得挺不错的,现在分享给大家,也给大家做个参考。

安装步骤

Docker安装

@H_673_6@

1
sudo apt-get install 便宜香港vps docker.io

拉取Hadoop镜像

@H_675_22@

  • 可以采用如下方式查找相关镜像
    @H_673_6@

    1
    docker search hadoop
  • 出现报错:
    Is the docker daemon running on this host?
    原因解决:
    权限不够,加sudo,或者采用[2]方法添加用户组解决。

    @H_675_22@

  • 切换源
    源在国外的,可以切换Ubuntu系统的更新源为国内,直接拉取kiwenlau做好的镜像
  • @H_673_6@

    1
    sudo docker pull kiwenlau/hadoop:1.0

    配置

    @H_675_22@

  • clone项目

    @H_673_6@

    1
    git clone https://github.com/kiwenlau/hadoop-cluster-docker
  • 配置网桥

    @H_673_6@

    1
    sudo docker network create --driver=bridge hadoop
  • 之后进入刚刚clone的kiwenlau的github项目,运行相关进程,即运行配置好的docker(运行脚本),进入Docker之后运行脚本即可。

    参考资料

    [1]. 简书-从 0 开始使用 Docker 快速搭建 Hadoop 集群环境

    [2]. CSDN-docker容器CAnnot connect to the Docker daemon. Is the docker daemon running on this host?解决方法

    原文链接 大专栏 ?https://www.dazhuanlan.com/2019/08/17/5d576d1530de4/

    本站总结

    以上是本站教程为你收集整理的基于Docker搭建Hadoop数据计算集群全部内容,希望文章能够帮你解决基于Docker搭建Hadoop数据计算集群所遇到的程序开发问题。

    如果觉得本站教程网站内容还不错,欢迎将本站教程推荐给好友。

    本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
    如您有任何意见或建议可联系处理。

    赞(0)
    【声明】:本博客不参与任何交易,也非中介,仅记录个人感兴趣的主机测评结果和优惠活动,内容均不作直接、间接、法定、约定的保证。访问本博客请务必遵守有关互联网的相关法律、规定与规则。一旦您访问本博客,即表示您已经知晓并接受了此声明通告。