pyspark读取csv文件多行选项不适用于具有换行spark2.3和spark2.2的记录

我正在尝试使用pyspark csv reader读取dat文件,它包含换行符(“\n”)作为数据的一部分。Spark无法将此文件作为单列读取,而将其视为新行。 我试着在阅读时使用“多行”选项,但仍然不起作用。

spark.read.csv(file_path, schema=schema, sep=delimiter,multiLine=True)

数据是这样的。这里$是vim中显示的换行符的CRLF。
name,test,12345,$ $ ,desc$ name2,test2,12345,$ $ ,desc2$ 所以pyspark将desc作为下一条记录。

如何在pyspark中读取此类数据。 在spark2.2和spark2.3版本中都尝试了这一点。