当值与pyspark中的字符串的一部分匹配时过滤df

当值与pyspark中的字符串的一部分匹配时过滤df Spark 2.2以上

df.filter(df.location.contains('google.com'))

Spark
2.2文档链接

---

Spark 2.1及更低版本

您可以使用 普通的SQL 中

filter

df.filter("location like '%google.com%'")

或 使用Dataframe列方法

df.filter(df.location.like('%google.com%'))

Spark
2.1文档链接