代码之家  ›  专栏  ›  技术社区  ›  lampShadesDrifter

Docker映像可以使用Hadoop吗?

  •  0
  • lampShadesDrifter  · 技术社区  · 5 年前

    Docker镜像可以访问Hadoop资源吗?提交纱线作业并访问HDF;比如 MapR's Datasci. Refinery ,但对于Hortonworks HDP 3.1。(可能假设该映像将在Hadoop群集节点上启动)。

    看到了Hadoop docs 用于从Hadoop节点启动Docker应用程序,但对是否可以走“另一条路”(即能够用传统的 docker -ti ... 命令并使该应用程序能够运行Hadoop JAR等(假设Docker映像主机本身就是Hadoop节点)。我知道Mapr Hadoop有Docker图片 this ,但我有兴趣使用Hortonworks HDP 3.1。最终试图逃跑 h2o Docker容器中的Hadoop。

    有人知道这是可能的还是可以确认这是不可能的?

    1 回复  |  直到 5 年前
        1
  •  0
  •   tk421    5 年前

    对。只要您有客户机jar和与容器的边缘节点类似的适当配置,它就可以工作。