tag 數據庫

標籤
貢獻698
1722
05:15 PM · Oct 25 ,2025

@數據庫 / 博客 RSS 訂閱

songofhawk - Python + Sqlalchemy 對數據庫的批量插入或更新(Upsert)

本篇承接上一篇《Mysql 數據庫的批量插入或更新(Upsert)》的內容,來看看在 Python 中,怎麼實現大量數據的 upsert(記錄存在就更新,不存在則插入)。 由於不同數據庫對這種 upsert 的實現機制不同,Sqlalchemy 也就不再試圖做一致性的封裝了,而是提供了各自的方言 API,具體到 Mysql,就是給 insert statement ,增加了 on_duplicat

海量數據 , sqlalchemy , 數據庫 , 優化 , Python

收藏 評論

mb61c46a7ab1eee - 深入解析:從容器化到自動化:Spring Boot 項目 Docker 部署與 GitLab CI/CD 集成 Harbor 全流程

在現代微服務架構中,容器化和自動化流水線是必備技能。本文將帶你完成兩個關鍵步驟: Spring Boot 項目容器化 —— 使用多階段 Dockerfile 構建輕量、安全的運行鏡像。 CI/CD 自動化 —— 藉助 GitLab CI/CD,將鏡像自動構建並推送到 Harbor 私有倉庫。 參考閲讀:Java Spring Boot 項目

MySQL , 推送 , 數據庫 , Docker

收藏 評論

老紀的技術嘮嗑局 - OceanBase Session ID 之謎

一. 寫作原因 遇到了 3 個事情,讓我想到要好好梳理一下 session id 的相關知識。 發現一個事務中查到的 OceanBase 的 session id 會發生變化(其實也算沒有變,原因下文會説)。 查到的 session id 在使用 kill 命令時候報錯找不到該 ID(不是因為 ID 真的不存在或者變化了)。 通過不同的查詢方式,查到很多和 session id 有關的 I

數據庫 , session

收藏 評論

ApacheIoTDB - 當數據庫世界重新討論文件格式:TsFile 與工業高質量數據集的背後邏輯

在《2025 數據庫世界年度回顧》中,TsFile 等文件格式正在重新引發數據庫系統的關注。 最近,CMU(Carnegie Mellon University,卡耐基梅隆大學)數據庫系統領域的重要代表人物 Andy Pavlo,發佈了他一年一度的《2025 數據庫世界年度回顧》。 作為長期參與並觀察數據庫系統演進的學者,他的年度回顧常被業界視為判斷技術走向的重要參考。 在這篇年度回顧中,一個耐人

數據庫

收藏 評論

microsoft_xin - MySQL 優化實戰:為何 DELETE + IN 子查詢性能不佳,而 JOIN 卻能高效利用索引?

問題背景:一次看似簡單的數據清理 在日常功能開發過程在中,我們經常需要根據某些條件清理特定數據。某天,我需要在tbl_doa_activityspecial表中刪除與另一組條件匹配的記錄。直覺上,我寫下了這樣的 SQL: DELETE FROM tbl_doa_activityspecial WHERE ActSetId IN (SELECT DISTINCT ActSetId FROM .

數據庫

收藏 評論

極限實驗室 - 使用 Docker Compose 簡化 INFINI Console 與 Easysearch 環境搭建

前言回顧 在上一篇文章《搭建持久化的 INFINI Console 與 Easysearch 容器環境》中,我們詳細介紹瞭如何使用基礎的 docker run 命令,手動啓動和配置 INFINI Console (1.29.6) 和 INFINI Easysearch (1.13.0) 容器,並實現了關鍵數據的持久化,解決了重啓後配置丟失的問題。 手動操作雖然能讓我們深入理解 Docker 的核心

console , 數據庫 , Docker

收藏 評論

瀟湘隱者 - MySQL權限管理的坑你踩了沒有?

假設有這麼一個需求,開發人員要求你創建一個賬號test,要求這個賬號有創建表,查詢,更新,刪除表的權限, 如下例子所示 mysql select version(); +-----------+ | version() | +-----------+ | 8.4.5 | +-----------+ 1 row in set (0.00 sec) mysql create database

數據庫

收藏 評論

瀟湘隱者 - MySQL 8.0.35 單實例升級到MySQL 8.4.x

因為MySQL 8.0.x版本即將於2026年4月結束服務支持,計劃將手頭MySQL 8.0.35升級到MySQL 8.4.8這個LTS版本. 下面是之前在測試環境的一些測試總結.僅供參考! 注意:之前官方只提供了MySQL 8.4.5,所以下面測試案例為MySQL 8.4.5,生產環境建議升級到8.4.8 LTS這個版本. 兩者升級方式其實是一樣的. 升級到MySQL 8.4.5有下面三種方式.

數據庫

收藏 評論

大仲馬小茶花 - 解密全網大模型都在推薦的數據對接工具

史上最全各大AI模型對數據集成平台分析彙總 在企業數字化轉型的深水區,異構系統間的數據割裂已成為制約業務敏捷性的核心瓶頸。當ERP、MES、WMS、CRM等系統因技術棧差異(.NET/Java/Python)、協議碎片化(REST/SOAP/數據庫直連)及數據模型衝突(多組織/多幣種/税則邏輯)形成"數據孤島"時,傳統ESB或自研微服務方案往往陷入開發週期冗長、運維成本高企、實時性難保障的困局。

教程 , 知識 , 數據庫 , 人工智能

收藏 評論

碼代碼永真 - 告別 mysqldump 痛點!用 mydumper 實現 MySQL 高效備份與恢復

告別 mysqldump 痛點!用 mydumper 實現 MySQL 高效備份與恢復 在 MySQL 數據管理場景中,備份與恢復是保障數據安全的核心環節。長期以來,mysqldump 作為官方自帶工具,憑藉易用性成為入門首選,但在面對中大型數據庫或高併發業務時,其單線程處理、備份速度慢、資源佔用高的問題逐漸暴露。而 mydumper 作為一款開源

MySQL , 數據庫

收藏 評論

金海境科技 - 【服務器數據恢復】政務雲虛擬化平台故障導致民生服務中斷數據恢復案例

一、客户信息 山東省某省級政務雲服務中心,負責全省16個地市的政務數據集中管理,承載社保、醫保、不動產登記、户籍管理等28個核心民生服務系統,服務全省1.02億常住人口及380萬市場主體。政務雲平台基於VMware vSphere構建,部署120台虛擬化主機,採用華為OceanStor分佈式存儲,總存儲容量達800TB,其中核心民生數據約320TB,包括近5年的社保繳費記錄

oracle , 數據 , 分佈式存儲 , 數據庫 , 數據恢復

收藏 評論

chinahuanqiu - 瞭解imtoken數據庫下載安裝框架代碼類型

數據庫框架代碼是一種專為開發數據庫應用程序而設計的編程框架。它通常包括一系列預先編寫的代碼、庫和工具,用於簡化和加速數據庫應用程序的開發過程。這些類型主要有:對象關係映射(ORM)框架、數據訪問對象(DAO)框架、SQL查詢構建器框架、數據庫遷移工具框架等。其中,對象關係映射(ORM)框架是一種在對象編程語言和關係數據庫之間創建映射的技術,使得開發者可以使

nosql , 數據庫 , 開發人員 , 數據庫框架

收藏 評論

愛看C語言的BK - MySQL 21天學習計劃 - 第二天

準備工作:選擇適合你的安裝方式 在開始MySQL學習前,我們需要先在電腦上搭建好運行環境。目前主流的安裝方式有三種,分別適合不同需求的學習者: 獨立安裝包(推薦有一定計算機基礎):直接從MySQL官網下載對應操作系統的安裝程序,可精確控制版本和配置。訪問MySQL官方下載頁面選擇"MySQL Community Server",根據你的系統(Windows/macOS

MySQL , 數據庫 , AI寫作 , aigc

收藏 評論

無聊的紅茶 - 5個實用技巧提升YashanDB數據庫的查詢效率

在現代數據庫管理系統中,如何提升查詢效率是技術人員面臨的重要挑戰。隨着數據規模的持續擴大以及業務查詢的複雜性增加,數據庫性能瓶頸和數據一致性維護變得尤為關鍵。YashanDB作為一款支持多種部署形態的高性能數據庫,其複雜的存儲結構與多樣的查詢處理機制為提升查詢效率提供了多維的技術手段。本文將基於YashanDB的架構和核心技術,從索引優化、數據存儲結構選擇、SQL執行優化、並行與向量化計算應用及緩

數據庫

收藏 評論

OBCE666 - OceanBase 在滴滴大規模運維經驗以及新功能落地實踐

作者:吳其朋,滴滴分佈式存儲運維負責人 滴滴出行(下文簡稱“滴滴”)作為涵蓋#網約車、#出租車、#順風車、#代駕 等業務的一站式多元化出行平台,擁有全球客户6.5億。自2024年應用OceanBase以來,已在多個場景落地並替換RocksDB、TokuDB,包括網約車增長服務、中台核心歸檔庫、代駕核心歸檔庫、EP、無人車服務等。本文以網約車增長服務、歸檔庫等核心業務為例,闡述滴滴的數據庫技術經驗以

數據庫

收藏 評論

laokugonggao - java常見面試微服務_微服務面試一般問什麼?java微服務面試題以及答案整理

Java全棧開發面試實戰:從基礎到微服務的全面解析 一、面試開場 面試官(微笑):你好,很高興見到你。我是今天的面試官,我們今天主要聊一下你在技術上的經驗,以及在項目中是如何解決問題的。你可以先簡單介紹一下自己嗎? 應聘者:您好,我叫李晨陽,今年28歲,畢業於復旦大學計算機科學與技術專業,碩士學歷。過去5年一直從事Java全棧開發工作,

spring , 微服務 , 數據庫 , vue3 , JAVA , Css , 前端開發 , HTML

收藏 評論

智能創新夢想家 - 第一章 自動化測試概念

一、自動化 1. 自動化概念 自動的代替人的行為完成操作,通過自動化測試有效減少人力的消耗的同時也提高了測試的質量和效率 常見面試題 1.自動化測試能夠取代人工測試嗎? 自動化測試不一定比人工測試更能保障系統的可靠性,自動化測試是測試人員手工編寫,後續如果有功能的變更自動化也需要進行不定期

移動端 , MySQL , log4j , 單元測試 , 數據庫 , 自動化測試 , selenium

收藏 評論

數據庫知識分享者 - 阿里雲 Tair 基於 3FS 工程化落地 KVCache:企業級部署、高可用運維與性能調優實踐

導讀 接着上一節內容,本文系統介紹了阿里雲 Tair KVCache 團隊與服務器研發存儲軟硬件結合團隊對 3FS(高性能 KVCache 底座)開展的全方位工程化升級實踐。 面向 AI 大模型推理中高吞吐、低延遲、強穩定性的核心訴求,團隊從性能調優、產品化增強與雲原生管理三大維度推進深度優化: 在性能層,通過 RDMA 流量均衡與小 I/O 參數調優,實現 4K 隨機讀

觀點 , 資訊 , MySQL , 數據庫 , SQL

收藏 評論

悲傷的斑馬 - 讓AI真正懂數據:項目中的AI知識庫建設實戰指南

在AI項目落地過程中,許多團隊都會遇到一個核心痛點:模型訓練數據質量參差不齊、業務知識斷層嚴重,導致AI“懂算法卻不懂業務”。如何讓AI從“數據消費者”升級為“數據理解者”?答案藏在AI知識庫建設中。本文結合真實項目經驗,拆解從0到1搭建AI知識庫的全流程,助你打造“懂業務、能推理、可進化”的智能中樞。 一、為什麼需要AI知識庫?——破解AI落地的三大困局 困局1:數據孤島與語義鴻溝

數據挖掘 , 教程 , 知識 , 數據庫 , prompt

收藏 評論

程序員曉東 - Java助力:同城自助KTV線上預約新風尚

在共享經濟與智能化浪潮的推動下,Java憑藉其跨平台性、高併發處理能力與豐富的生態庫,成為支撐同城自助KTV線上預約系統穩定運行的核心引擎,實現了從預約、支付到設備控制的全鏈路自動化,打造出“線上預約、線下嗨唱、全程無接觸”的新風尚。以下從技術架構、核心功能、創新實踐及商業價值四個維度,解析Java如何驅動這一變革: 一、技術架構:高彈性、高併發、

MySQL , 開發語言 , 技術架構 , 推送 , 數據庫 , JAVA

收藏 評論

從容的漢堡包 - 怎麼快速申請內網IP證書?如何選擇內網IP證書?需要導入根證書嗎?

如何快速申請與選擇內網IP SSL證書及根證書管理策略 在當今數字化時代,網絡安全已成為企業和個人不可忽視的重要議題。隨着互聯網的普及和信息技術的發展,越來越多的服務和應用被部署在內網上,以保障數據的安全性和隱私性。然而,即便是在內網環境中,確保通信的安全加密同樣至關重要。這時,內網IP SSL證書就顯得尤為重要了。本文將詳細介紹如何快速申請內網IP SSL證書、如何選擇適合自己需求的內網IP S

觀點 , 教程 , 數據庫 , memcached , 前端

收藏 評論

會洗碗的CV工程師 - Ubuntu系統使用Docker安裝openGauss數據庫完整教程

一、前言 openGauss是華為公司開源的企業級關係型數據庫,採用木蘭寬鬆許可證v2發行。該數據庫具有高性能、高安全、高可靠的特點,支持多核架構優化、AI智能調優等先進功能。本教程將詳細介紹如何在Ubuntu系統上通過Docker容器化方式快速部署openGauss數據庫。 多種存儲模式支持複合業務場景,

mongodb , openGauss , 數據庫 , 在51CTO的第一篇博文 , Docker

收藏 評論

qq62d9de275644f - bcm2835-v4l2 / sunxi-v4l2

靈芯派的 V4L2 驅動根本不會因為“設置 320×200”去重啓傳感器或重新協商媒體類型,它只在驅動層做裁剪/縮放,所以零額外耗時;Windows 的 Direc 一、V4L2 為什麼敢“秒切” 攝像頭硬件本身只輸出 固定幾種分辨率(比如 1920×1080 MJPEG、640×480 YUYV …)。 靈芯派內核驅動(bcm2835-v4

縮放 , redis , windows , 數據庫 , 重啓

收藏 評論