博客 / 列表

AIIData數據中台 - 〔從零搭建〕數倉建模平台部署指南

1、數倉建模平台基於開源項目kylin建設 AllData數據中台商業版集成Kylin後，提供超大規模數據的實時分析與數倉建模能力。通過Kylin的預計算技術，實現PB級數據的亞秒級查詢響應，支持高併發多維分析場景。 系統內置分佈式計算框架，可動態擴展資源，結合Kylin的列式存儲與高效壓縮算法，顯著降低存儲成本，適用於金融風控、零售精準營銷等複雜數據分析需求

數據源 , 建模 , 數據 , 私藏項目實操分享 , 數據庫 , SQL Server

AIIData數據中台 - 實時開發平台(Streampark)--Flink SQL功能演示

摘要： • 使用Flink StandaIone模式運行FIink SQL Demo •Flink 安裝包需要與 StreamPark 服務同在一台服務器 實時開發平台基於開源項目StreamPark建設 實時開發平台 StreamPark 提供了一系列快捷 API 和 Connector，開箱即用，作業狀態自動追蹤，快速完成作業的開發和管理。同

服務器 , 數據庫 , SQL Server , flink , 流處理

AIIData數據中台 - 雲原生數據平台(cloudeon)--核心服務組件擴展

摘要：本文聚焦於雲原生數據平台（Cloudeon），詳細闡述了其核心服務組件的擴展情況，具體涵蓋以下新增服務： • 添加ZooKeeper服務 •添加HDFS服務 • 添加FIink服務 • 添加YARN服務 • 添加doris服務 雲原生數據平台基於開源項目CloudEon建設 基於開源項目CloudEon建設，簡化k

數據集 , 初始化 , 私藏項目實操分享 , 數據庫 , SQL Server , 開源項目

AIIData數據中台 - 離線開發平台-HdfsFile同步Doris

離線開發平台基於開源項目DolphinScheduler建設。 DolphinScheduler 是一個功能強大的分佈式任務調度平台，支持複雜工作流編排、任務監控與告警，適用於離線數據處理場景。 1. 環境準備 HDFS Doris seatunnel 1.1 SeatunneI

項目管理 , 開發平台 , MySQL , 離線 , 數據庫 , 開源

AIIData數據中台 - airflow元數據拾取能力演示

摘要： 本文檔介紹如何在Linux服務器上部署Airflow服務，與openmetadata進行集成，後在openmetadata系統中實現對Airflow工作流數據的拾取以及數據庫元數據的拾取。 • openmetadata：1.6.0 •airflow：2.9.1 元數據管理平台基於開源項目OpenMetaData建設 元數據管理平台Op

服務器 , yyds乾貨盤點 , MySQL , 虛擬環境 , 元數據 , 數據庫 , 開源