如何解决如何在pyspark中编写具有多个agg的函数，例如sum，first，collect_set，count_distinct？
data = data.groupby(columns_for_groupby).agg(first('AGE').alias('AGE'),first('WEIGHT').alias('WEIGHT'),first('MOBILE').alias('MOBILE'),sum('HEIGHT').alias('HEIGHT_SUM'),collect_set('WORK_EXP').alias('WORK_EXP_LIST'),F.countdistinct('PLANT').alias('PLANT_COUNT'),first('DATE').alias('DATE'))
所以我用这种格式编写了代码，我有很多功能分别属于 first、sum、collect_set、F.countdistinct。我想编写一个函数，该函数将获取 first、sum、collect、不同变量的列表，并通过相应的 groupby 以及相应的重命名传递数据帧。我对 pyspark 很陌生，任何帮助将不胜感激。 谢谢
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。
