[英]Detect end of event time session window (Apache Flink Java)
假設所有事件都准時到達並且不允許遲到,我如何僅在會話窗口結束時進行一些處理? 即水印已經通過( lastEventInWindowTimestamp + inactivityGap
)。 我找不到發生這種情況時調用的任何 API 方法。 我可以使用自定義ProcessWindowFunction
實現此邏輯嗎?
是的, ProcessWindowFunction
正是為了這個目的。 當窗口完成時調用這樣的函數,並傳遞(除其他外)一個包含已分配給窗口的流元素的 Iterable。 在會話窗口的情況下, ProcessWindowFunction
直到不活動期過后才會被調用。
更新:您如何報告每個會話窗口的開始和結束時間戳?
我假設您可以從事件本身中提取每個事件的時間戳。 然后,如果您使用ProcessWindowFunction
,您可以遍歷窗口中的事件並確定會話中事件的最小和最大時間戳——這些將是開始和結束時間戳。
另一方面,如果您更願意使用增量計算窗口結果的 reduce 函數,您可以使用跟蹤每個窗口的(最小、最大)時間戳的元組。
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.