代码之家 › 专栏 › 技术社区 › Tiffany

如何仅访问纱线簇中的spark日志

hadoop-yarn apache-spark

Tiffany · 技术社区 · 8 年前

1 回复 | 直到 8 年前

Andrew 8 年前

是的,您可以记录每个任务的日志。

yarn logs --applicationId <TASK_ID>

例如:

yarn logs --applicationId application_1504771895665_0001

通过该命令,您可以查看任务使用的每个容器的日志。

推荐文章

Pasq · 将远程目录发布到远程Repo Github工作流

3 年前

Surender Raja · 纱线如何在集群模式下了解Apache spark中的数据位置

8 年前

user3725190 · JAVAlang.ClassCastException:组织。阿帕奇。hadoop。无法将配置转换为组织。阿帕奇。hadoop。纱线配置文件配置

8 年前

sealfeeder · HADOOP Thread-应用程序已添加到调度程序中,尚未激活。由于群集资源为空,正在跳过AM分配

8 年前

Ondrej · GCP Dataproc-配置纱线展计划程序

8 年前

jk1 · 纱线是否计算过执行器数量?

8 年前

enodmilvado · 从HDP当前版本2.6.0.3升级到2.6.4失败

8 年前

Soheil Pourbafrani · 关于标记纱线的Flink会话-请求的资源不可用

8 年前

Lejla · 在dataproc上找不到有效的SPARK\u主页

8 年前

Soheil Pourbafrani · 纱线指定在哪个节点管理器上运行哪个应用程序

8 年前