tag 數據庫

標籤
貢獻652
602
05:15 PM · Oct 25 ,2025

@數據庫 / 博客 RSS 訂閱

SeaTunnel - 一行代碼引發 12G 內存 5 分鐘爆倉!SeaTunnel Kafka 連接器"內存溢出"元兇抓到了

轉載 | 滑思眉Philip 問題背景 在Apache SeaTunnel 2.3.9版本的Kafka連接器實現中,存在一個潛在的內存溢出風險。當用户配置流式作業從Kafka讀取數據時,即使設置了讀取速率限制(read_limit.rows_per_second),系統仍可能出現內存持續增長直至OOM(Out Of Memory)的情況。 問題現象 用户在實際部署中觀察到以下現象: 在8核1

數據同步 , 數據庫 , 開源 , seatunnel , kafka

收藏 評論

趙渝強老師 - 【趙渝強老師】達夢數據庫實例的狀態

達夢數據庫實例包含MOUNT、OPEN和SUSPEND三種狀態。下表説明了數據庫實例每種狀態的含義。 注意:OPEN狀態與MOUNT和SUSPEND能相互轉換,但是MOUNT和SUSPEND之間不能相互轉換。 視頻講解如下: https://www.bilibili.com/video/BV1H5HQznE6A/?aid=115180017029... 達夢數據庫實例包含NORMAL

oracle , 數據庫 , 達夢數據庫

收藏 評論

程序員一諾python - redis數據庫筆記第8篇:配置機器2,數據驗證

🚀🚀🚀本篇主要內容 配置機器2 在演示中,172.16.179.131為當前ubuntu機器的ip 在172.16.179.131上進⼊Desktop⽬錄,創建conf⽬錄 在conf⽬錄下創建⽂件7003.conf,編輯內容如下 port 7003 bind 172.16.179.131 daemonize yes pidfile 7003.pid cluster-enable

redis , 數據庫

收藏 評論

雲輕雨細 - Spring Boot配置優化:Tomcat+數據庫+緩存+日誌,全場景教程

前言 Spring Boot配置優化,每個配置都附有代碼和詳解,即使剛接觸也能輕鬆上手(注:具體配置需結合實際使用的Spring Boot版本進行調整)。 一、Tomcat連接池配置:應對高併發的“交通指揮官” Spring Boot默認集成Tomcat服務器,但默認連接池參數偏保守,高併發時容易出現“請求排隊、響應變慢”的問題,就像“窄馬路容不下太多車”。我們需要調整參數,讓Tomcat能“容納

tomcat , 數據庫 , springboot

收藏 評論

SelectDB技術團隊 - 愛瑪集團:All In SelectDB 構建極速統一數據平台,領航 AI 數智化實踐

愛瑪集團作為電動車行業的領軍企業,在經過三年多的數智化轉型實踐,成功構建了 All In SelectDB 的統一數據平台,實現了從傳統 Hadoop 多組件架構到 SelectDB 輕量級一體化平台的轉變,數據處理效率提高 5-8 倍,系統穩定性顯著提升。與此同時,引入 MCP Server 智能交互查詢,這背後,是愛瑪集團在數據技術選型、架構設計和平台建設方面的深度思考與實踐。 在電動車

運維 , 數據庫 , 人工智能 , apache

收藏 評論

程序員一諾python - redis數據庫筆記第9篇:在哪個服務器上寫數據:CRC16,Python交互

🚀🚀🚀本篇主要內容 在哪個服務器上寫數據:CRC16 redis cluster在設計的時候,就考慮到了去中⼼化,去中間件,也就是説,集羣中 的每個節點都是平等的關係,都是對等的,每個節點都保存各⾃的數據和整個集 羣的狀態。每個節點都和其他所有節點連接,⽽且這些連接保持活躍,這樣就保 證了 只需要連接集羣中的任意⼀個節點,就可以獲取到其他節點的數據 Redis集羣沒有並使⽤傳統的⼀致

redis , 數據庫

收藏 評論

趙渝強老師 - 【趙渝強老師】Oracle數據庫配置助手:DBCA

Oracle提供了數據庫配置助手DBCA來創建Oracle數據庫。DBCA的全稱是Oracle Database Configuration Assistant,它的運行模式有圖形界面和靜默執行兩種方式。使用DBCA可以非常方便地創建Oracle數據庫,也可以配置和刪除Oracle數據庫。 視頻講解如下: https://www.bilibili.com/video/BV1t6pczsE6c

oracle , 數據庫

收藏 評論

IvorySQL - IvorySQL 4.6:DocumentDB+FerretDB 實現 MongoDB 兼容部署指南

背景 MongoDB 誕生之初,便以出色的易用性與詳盡的驅動程序文檔脱穎而出,堪稱對傳統關係型數據庫的一次重要革新,也正因如此,它迅速成為開發者社區的熱門之選。 然而,隨着其許可模式從開源轉向 SSPL 許可證,MongoDB 的授權機制變得日趨複雜——這一變化直接導致它不再適配大量開源項目,同時也讓許多處於早期階段的商業項目難以將其納入技術選型。 在此背景下,越來越多用户開始尋求 MongoDB

mongodb , 數據庫 , postgresql , 開源

收藏 評論

墨天輪 - 技術分享 | Oracle 11g靜默安裝

本文為墨天輪數據庫管理服務團隊第117期技術分享,內容原創,作者為技術顧問楊玉壯,如需轉載請聯繫小墨(VX:modb666)並註明來源。如需查看更多文章可關注【墨天輪】公眾號。 配置主機名 vi /etc/hosts 檢查主機名和網絡並且配置/etc/hosts文件 關閉防火牆 檢查防火牆狀態 systemctl status firewalld.service 暫時關閉防火牆,下次啓動時防火牆仍

oracle , 數據庫 , SQL

收藏 評論

程序員一諾python - redis數據庫筆記第10篇:Redis簡介,Redis特性

🚀🚀🚀本篇主要內容 Redis簡介 Redis是一個開源的使用ANSI C語言編寫、支持網絡、可基於內存亦可持久化的日誌型、Key-Value數據庫,並提供多種語言的API。從2010年3月15日起,Redis的開發工作由VMware主持。從2013年5月開始,Redis的開發由Pivotal贊助。 Redis是 NoSQL技術陣營中的一員,它通過多種鍵值數據類型來適應不同場景下的存

redis , 數據庫

收藏 評論

RestCloud - SQL Server到Hive:批處理ETL性能提升30%的實戰經驗

在企業數字化轉型進程中,將 SQL Server 的業務數據同步至 Hive 數據倉庫,是構建大數據分析平台的關鍵一步。然而,當數據量突破千萬級門檻,傳統同步方式往往陷入效率低下、穩定性差的困境。本文將分享使用ETLCLoud工具實現千萬級數據量下SQL Server到Hive高效同步的實戰經驗。 1.配置數據源 來到平台首頁進入數據源管理模塊。 在新建數據源中選擇SQLserver數據源模板

數據同步 , hive , 數據庫 , etl , sqlserver

收藏 評論

藍易雲 - 藍易雲:GC的前置工作,聊聊GC是如何快速枚舉根節點的

GC 的前置工作:快速而準確的根枚舉是怎麼做到的? ⚡ 在開始標記前,主流運行時都會做一輪“整頓秩序”的前置工作,目標是:以極低停頓時間把 span style="color:red;"GC 根(Roots)/span 找全、找準。根通常來自:線程span style="color:red;"寄存器/span、各線程span style="color:red;"棧幀/span、全局/靜態區、線程本

MySQL , 數據庫 , postgresql , sqlite , SQL

收藏 評論

IvorySQL - AI時代雲原生數據庫一體機的思考

本文整理自 IvorySQL 2025 生態大會暨 PostgreSQL 高峯論壇的演講分享,演講嘉賓:唐成,中啓乘數科技 CTO,資深 PostgreSQL 專家。 引言 AI 技術正從訓練轉向推理與應用,數據基礎設施面臨新的挑戰。傳統數據庫難以滿足 AI Agent 對實時性、多模態檢索和彈性擴展的需求。PostgreSQL 因其擴展性成為 AI 時代的數據基石,雲原生數據庫一體機通過存算分離

數據庫 , postgresql , 人工智能 , 程序員 , 後端

收藏 評論

趙渝強老師 - 【趙渝強老師】基於PostgreSQL的MPP集羣:Greenplum

Greenplum本質上是一個基於PostgreSQL的關係型數據庫集羣,實際上是由多個獨立的數據庫服務組合而成的一個邏輯數據庫。與Oracle的RAC不同,這種數據庫集羣採取的是MPP(Massively Parallel Processing,大規模並行處理)架構。Greenplum最大的特點就是基於低成本的開放平台基礎上提供強大的並行數據計算性能和海量數據管理能力。下圖展示了Greenplu

greenplum , 數據庫 , postgresql , SQL

收藏 評論

老紀的技術嘮嗑局 - 經驗分享 —— 在 Ubuntu 虛擬機中部署 OceanBase 數據庫

0. 有獎徵文活動 OceanBase 社區正在組織一個以 “OBD 單機部署上手體驗” 為主題的有獎徵文活動,參與方式詳見:https://ask.oceanbase.com/t/topic/35630223。 徵文獎金超級豐厚,具體有多麼豐厚?更多詳情👉「2025 OceanBase 佈道師計劃」 1. 概述 本文主要分享在 Windows 筆記本上的 Linux 子系統 Ubuntu 上部

部署 , oceanbase , 數據庫 , Ubuntu

收藏 評論

TDengine濤思數據 - 從“人找數據”到“數據找人”:陳肅在 CCF 大會分享 AI-Ready 工業數據平台實踐

近日,第十三屆 CCF 大數據學術會議在天津成功舉行,吸引了近 700 位來自學術界、產業界的專家學者齊聚一堂,聚焦“數據要素築基、數智融合創新”,共同探討數字經濟時代的技術變革與產業機遇。 在這場國內大數據領域的年度盛會上,濤思數據高級副總裁、解決方案中心總經理陳肅受邀作專題演講,帶來了題為《如何打造 AI 驅動的物聯網工業大數據平台》的深度分享。 工業大數據的困局:存得下,卻用不快 陳肅開篇

資訊 , 數據庫 , SQL

收藏 評論

TDengine濤思數據 - 新客户 | 每天億級逐筆委託、逐筆成交,金融數據平台如何不掉鏈子

在全球金融市場互聯互通的今天,逐筆成交、逐筆委託、K 線快照等數據量呈指數級增長。港股全市場高峯期每秒可達 3 萬筆交易,美股更是飆到 40 萬筆/秒。對於證券公司和金融科技服務商而言,不僅要“存得下”,還要“用得快”:全量明細長期留存、按證券代碼和時間窗口頻繁查詢、行情推流實時穩定,這些都對底層數據平台提出了高吞吐、低延遲、高可靠的嚴苛要求。 令克軟件為證券、期貨、基金、銀行、私募等機構提供門

資訊 , 數據庫 , SQL

收藏 評論

CloudDM - SQL 審核工具深度體驗(一): CloudDM vs Archery vs Yearning vs Bytebase

數據庫變更是日常開發和運維裏繞不開的活。為了降低線上環境出故障的風險,通常會配合工單系統來發布變更,這樣流程可控,也能減少低級錯誤。市面上能選的工具不少,有開源的,也有商業化的。這次我挑了四款比較常見的:Yearning、Archery、Bytebase,還有 CloudDM,從工單場景出發做了一輪體驗和橫向對比,給大家一些參考。 測評方法 不同工具的功能側重點不一樣,如果各方面都測,反而看不出差

觀點 , devops , 運維 , 數據庫 , SQL

收藏 評論

IvorySQL - PostgreSQL 全表 count 優化實踐:從 SeqScan 痛點分析到 heapam 改進與性能突破

本文整理自 IvorySQL 2025 生態大會暨 PostgreSQL 高峯論壇的演講分享,演講嘉賓:權宗亮。 本文主要包括以下三部分: SeqScan 現狀 heapam 改進 全表計數 SeqScan 現狀 我們使用了一個稍寬的 SeqScan 表,包含約 10-20 個字段,記錄數達 1,000 萬。填充因子約為 50%,生成的數據總計 2.63 GB,佔用約 34.5 萬塊磁盤

數據庫 , postgresql , 人工智能 , SQL , 程序員

收藏 評論

墨天輪 - 技術分享 | Oracle undo表空間warp#超出最大值修復

本文為墨天輪數據庫管理服務團隊第105期技術分享,內容原創,作者為技術顧問陳坤,如需轉載請聯繫小墨(VX:modb666)並註明來源。如需查看更多文章可關注【墨天輪】公眾號。 問題概述 undo表空間某個slot warp#超出最大值0xffffffff(轉換為10進製為4294967259)時undo表空間出現異常,影響數據庫操作,導致業務中斷。 問題原因 這是一個數據庫機制問題。根據文檔(Do

oracle , 數據庫 , SQL

收藏 評論

IvorySQL - IvorySQL文檔共建計劃第一期!提 PR,提 Issue,贏取 Beats 耳機、機械鍵盤、書籍等多重好禮!

文檔是開源項目的重要組成部分。結構清晰、內容詳細且準確、易於理解,這樣的文檔可以讓用户更容易理解並上手使用開源項目,在使用的過程中,大部分問題也可以通過閲讀理解文檔來解決。在開源數據庫的世界裏,一份完整、準確的文檔不僅是技術的指南針,更是社區成長的基石。 作為一款基於 PostgreSQL 的開源數據庫,IvorySQL 一直致力於提供更優質的用户體驗。然而,隨着功能的不斷迭代和任務的增多,Ivo

github , 數據庫 , postgresql , 人工智能 , 程序員

收藏 評論

IvorySQL - 直播預告| PostgreSQL 與 IvorySQL 在雲原生時代的演進與實踐

觀看直播即有機會獲取 IvorySQL 周邊禮品。歡迎大家預約哦! 直播預告 本期直播將由兩位講師聯袂分享。 直播時間和平台 時間:2025 年 9 月 29 日 19:30 開啓 平台:【IvorySQL】視頻號 講師簡介 唐成,中啓乘數創始人及 CTO,IvorySQL 專家顧問委員會成員。《PostgreSQL 修煉之道:從小工到專家》的作者,中啓乘數科技創始人及 CTO。資深數據庫

數據庫 , postgresql , 人工智能 , SQL , 程序員

收藏 評論

SelectDB技術團隊 - Apache Doris 3.1 正式發佈:半結構化分析全面升級,湖倉一體能力再躍新高

親愛的社區小夥伴們,我們很高興地向大家宣佈,近期我們迎來了 Apache Doris 3.1 版本的正式發佈,歡迎大家下載使用體驗。 3.1 版本是 Apache Doris 在半結構化分析上的一個里程碑版本。在 VARIANT 類型上,3.1 版本新增了稀疏列能力,使得 VARIANT 可以輕鬆應對數萬子列的場景。同時,在 VARIANT 類型上引入了模板化 schema 能力,讓 VARIAN

數據庫 , apache

收藏 評論

TDengine濤思數據 - 直播預告 | C 語言內存問題分析與調試技巧

在複雜的 C/C++ 項目中,程序偶發崩潰、內存佔用一路飆升、性能逐漸下降——這些問題往往藏得極深,人工排查耗時低效,常常讓開發團隊頭疼不已。 面對這些困擾開發者多年的“老大難”,如何才能既快速定位,又能從源頭上杜絕?答案就在本期 TDengine Open Day。 9 月 25 日(週四)19:00,TDengine Open Day 直播重磅開啓!本期主題聚焦 《C 語言內存問題分析與調試技

數據庫 , SQL

收藏 評論