在使用FlinkSQL進行實時數據處理的過程中,雙流Join是非常常見的操作之一。典型的場景包括分析廣告效果(曝光流訂單流實時關聯)、實時推薦(點擊流和商品信息)等等。然而,雙流Join需要在狀態中維護兩側全量的歷史數據,以確保計算結果的準確性。隨着作業的持續運行,雙流Join會逐漸帶來一些問題:
運維層面
狀態過大,開發者需要不斷加大作業的資源才能維持較高的吞吐。
C
新一代應用統一部署管理平台 Seal AppManager 採用平台工程的理念,通過降低基礎設施操作的複雜度為研發和運維團隊提供易用、一致的應用管理和部署體驗。Seal AppManager 幫助研發和運維團隊實現關注點分離,即運維工程師負責基礎建設,研發可以在零基礎設施知識的情況下實現應用部署管理。
本文以運維和研發兩個視角,介紹如何通過Seal Ap