'where'in apache spark

Question

df: 

-----------+ 
|  word| 
+-----------+ 
|  1609| 
|   | 
|  the| 
| sonnets| 
|   | 
|   by| 
| william| 
|shakespeare| 
|   | 
|   fg| 

这是我的数据框。如何使用'where'子句删除空行（删除包含''的行）。

code: 

df.where(trim(df.word) == "").show() 

output: 

----+ 
|word| 
+----+ 
| | 
| | 
| | 
| | 
| | 
| | 
| | 
| | 
| | 

任何帮助表示赞赏。

Answer 1

您可以修剪和检查，如果结果为空：

>>> from pyspark.sql.functions import trim 
>>> df.where(trim(df.word) != "")