代码之家  ›  专栏  ›  技术社区  ›  Igor Piddubnyi

apache flink,大grap-submisson的作业在集群上超时

  •  0
  • Igor Piddubnyi  · 技术社区  · 8 年前

    我们试图用相当复杂的逻辑为价格汇总建立Flink作业。

    以前的版本有一个图表如下。

    在另一次开发迭代之后,我给工作增加了更多的复杂性。 新版本在IDE中运行良好,但是部署到群集失败

    原因:org.apache.flink.runtime.client.jobclientactorSubmissionTimeoutException:作业提交到作业管理器超时。

    如果我重新配置作业(减少图形复杂度),它就可以毫无问题地部署。

    我的问题是:

    1. 提交到独立群集时,作业图大小和复杂性是否有任何限制?
    2. 是否有可能禁用图形化图形表示(我怀疑问题是由图形视图引起的-我的工作在本地工作)
    3. 是否有任何调试工具,以了解在提交作业时发生了什么,以及为什么会超时?

    提前谢谢。

    enter image description here

    1 回复  |  直到 8 年前
        1
  •  1
  •   Igor Piddubnyi    8 年前

    解决方案是使用最新的flink版本(编写时为1.5)。

    推荐文章