为应用程序JAR文件指定主机

我使用以下命令从目录创建了一个HTTP服务器:

python -c 'import BaseHTTPServer as bhs, SimpleHTTPServer as shs; bhs.HTTPServer(("0.0.0.0", 8089), shs.SimpleHTTPRequestHandler).serve_forever()'

我使用spark-k8s运算符执行spark应用程序。作为主文件,我希望使用存储在目录中的JAR文件(从中创建HTTP服务器)。但是,我不知道应该将目录映射到哪个主机,以便通过部署运行的spark应用程序可以使用它。 当我用当前主机运行它时,我会得到这个连接错误:

java.net.ConnectException: Connection refused

基本上,我有一个HTTP服务器,它指的是指定的主机和端口,我想使用K8S之上的spark运行这个jar文件,我如何定义这个主机?

目前,应用程序定义如下:

apiVersion: sparkoperator.k8s.io/v1alpha1
kind: SparkApplication
metadata:
  name: spark-example
  namespace: default
spec:
  type: Scala
  image: gcr.io/spark-operator/spark:v2.4.0
  mainClass: org.apache.spark.examples.SparkExample
  mainApplicationFile: https://0.0.0.0:8089/spark_k8s_airflow.jar
  mode: cluster
  deps: {}
  driver:
    coreLimit: 1000m
    cores: 0.1
    labels:
      version: 2.4.0
    memory: 1024m
    serviceAccount: intended-mink-spark
  executor:
    cores: 1
    instances: 1
    labels:
      version: 2.4.0
    memory: 1024m
  imagePullPolicy: Never