亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

在pyspark GroupedData中返回具有最佳字段的行

在pyspark GroupedData中返回具有最佳字段的行

冉冉說 2021-04-26 16:18:27
我正在嘗試將一個GroupedData對象聚合成Row具有最佳屬性(不是None或最高timestamp)的對象,Dataframe例如:╔═══════╦═══════════╦════════╦════════╦════════╗║ group ║ timestamp ║ value1 ║ value2 ║ value3 ║╠═══════╬═══════════╬════════╬════════╬════════╣║ a     ║       111 ║ None   ║ None   ║ None   ║║ a     ║       222 ║ a      ║ None   ║ None   ║║ a     ║       333 ║ b      ║ 1      ║ 1.1    ║║ a     ║       444 ║ None   ║ None   ║ 2.2    ║║ b     ║       111 ║ c      ║ None   ║ 3.3    ║╚═══════╩═══════════╩════════╩════════╩════════╝我想要一個Dataframe類似的結果:╔═══════╦═══════════╦════════╦════════╦════════╗║ group ║ timestamp ║ value1 ║ value2 ║ value3 ║╠═══════╬═══════════╬════════╬════════╬════════╣║ a     ║       444 ║ b      ║ 1      ║ 2.2    ║║ b     ║       111 ║ c      ║ None   ║ 3.3    ║╚═══════╩═══════════╩════════╩════════╩════════╝理想情況下,我想創建一個不同的邏輯來匯總每一列。例如min對于timestamp而是max對value3。這可能在Dataframes嗎?
查看完整描述

2 回答

  • 2 回答
  • 0 關注
  • 164 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號