我的数据框看起来像下面Pyspark从列在数据帧中删除空值
ID,FirstName,LastName
1,Navee,Srikanth
2,,Srikanth
3,Naveen,
现在我的问题陈述我不得不删除的行号2,因为名字为空。
我使用下面pyspark脚本
join_Df1= Name.filter(Name.col(FirstName).isnotnull()).show()
我得到错误的
File "D:\0\NameValidation.py", line 13, in <module>
join_Df1= filter(Name.FirstName.isnotnull()).show()
TypeError: 'Column' object is not callable
任何人都可以请帮我在这解决
退房答案https://stackoverflow.com/questions/37262762/filter-pyspark-dataframe-column-with-none-value –
[过滤器的可能的复制Pyspark数据框列无值](https://stackoverflow.com/questions/37262762/filter-pyspark-dataframe-column-with-none-value) –