PySpark-加载本地文件(图像)时路径不存在

我正在迈出第一步 spark 在python中使用 pyspark 在寻找可行的解决方案后,我面临着几个疑虑和失败。到目前为止,我正在做:

import pyspark
from pyspark.context import SparkContext
from pyspark.sql.session import SparkSession
sc = SparkContext('local')
spark = SparkSession(sc)

我不完全理解上面的代码。在启动pyspark项目时,它必须始终存在吗?是 SparkContext 设置为 local 因为我在本地用电脑工作,还没有在云端?

在任何情况下,当我尝试加载本地文件(在本例中为图像)时,我都会收到以下错误:

path = 'file:///home/guacamole/Training/sprk/myimage.jpg'
image_df = spark.read.format("image").load(path)

AnalysisException: Path does not exist: file:/home/guacamole/Training/sprk/myimage.jpg;

通过类似的问题,我看到有人指出 file:/// 必须添加以指定它是本地文件。不知道我在这里错过了什么或做错了什么。