代码之家 › 专栏 › 技术社区 › user3843858

我想读取一个源文件,并将数据写入Spark scala中带有附加标识列的.Csv文件

azure-hdinsight scale

user3843858 · 技术社区 · 7 年前

我想读取一个CSV文件,并将其存储到一个CSV文件中,其中包含几个附加列,如自动生成的列、标识列、加载日期和时间。

我正在使用spark 2.0。

1 回复 | 直到 7 年前

maxiluk 7 年前

推荐文章

ankush reddy · 如何在spark HDInsight群集上安装tensorflow?

6 年前

Siddiqui Mind · 使用按需HD Insight群集从Azure datafactory V2访问datalake

6 年前

Ahmad Osama · 将数据从Apache Storm插入Azure Cosmos DB

7 年前

user9010901 · Spark SQL-Select生成AttributeError:“module”对象没有属性“api”

7 年前

pythonic · 如何访问Microsoft Azure HDInsight中的blob存储?

7 年前

user3843858 · 如何连接Azure analysis services中的Data Lake store

7 年前

user3843858 · 我想读取一个源文件,并将数据写入Spark scala中带有附加标识列的.Csv文件

7 年前

Arnab · 通过HDInsight中的RDP使用PIG时,绝对URI错误中的相对路径

9 年前

user1907849 · 将扫描命令转换为windows中的文本文件

9 年前