Scala Spark包含vs.不包含

发布时间：2020-12-16 08:50:20 所属栏目：安全来源：网络整理

导读：我可以使用“contains”过滤 – 如下所示 – RDD中的元组.但是如何使用“不包含”过滤RDD呢？ val rdd2 = rdd1.filter(x = x._1 contains ".") 我找不到这个的语法.假设有可能并且我没有使用DataFrames.我无法看到如何使用正则表达式和/或过滤器示例. 解决方

我可以使用“contains”过滤 – 如下所示 – RDD中的元组.但是如何使用“不包含”过滤RDD呢？

val rdd2 = rdd1.filter(x => x._1 contains ".")

我找不到这个的语法.假设有可能并且我没有使用DataFrames.我无法看到如何使用正则表达式和/或过滤器示例.

解决方法

它只是包含过滤谓词的否定：

val rdd2 = rdd1.filter(x => !(x._1 contains "."))

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!