代码之家 › 专栏 › 技术社区 › Masterbuilder

基于Spice和Java两种条件的过滤柱

apache-spark-sql java

Masterbuilder · 技术社区 · 7 年前

我试图在我的DATAFRAME上添加一个过滤器,由于某些原因,Java条件不在Java中工作,它在斯卡拉工作得很好。代码甚至都无法编译。在Java中如何在过滤条件下使用

留言上说

The operator || is undefined for the argument type(s) org.apache.spark.sql.Column, org.apache.spark.sql.Column

df.filter((df.col("eventNumbers").contains("2") )|| (df.col("eventNumbers").contains("45")))

1 回复 | 直到 7 年前

rodridevops 7 年前

首先,你必须:

import static org.apache.spark.sql.functions.*;

Java中的Scala代码将是:

df.filter((df.col("eventNumbers").contains("2") ).or(df.col("eventNumbers").contains("45")))

推荐文章

maximodesousadias · 如何根据条件删除日期后的记录

1 年前

Joe Bloggr · 如何将Dataframe类型的函数参数传递给SparkSQL查询

1 年前

Shankar Panda · 如何从org.apache.spark.sql获取密钥。在scala中键入列并将其放入列表变量中?

1 年前

Aaron Brazier · 连接2个pyspark数据帧并继续运行窗口sum和max

1 年前

user23358051 · 火花顺序优化规则

1 年前

Tristpost · 如何从我自己的Java Stream将CSV数据最好地加载到Apache Spark数据帧中?

1 年前

David Cunningham · Pyspark结构化流媒体-来自以前记录的数据

1 年前

Surender Raja · 对case语句的pyspark查询引发错误

1 年前

ConfusedDeveloper · 取消查看SPARK SQL中的列组

2 年前

nfsp412 · 当我使用spark-sql时,将出现此错误

2 年前