收藏 / 列表

天翼雲開發者社區 - sql優化謂詞下推在join場景中的應用

本文分享自天翼雲開發者社區《sql優化謂詞下推在join場景中的應用》,作者:i****n 列裁剪(分區裁剪):將為查詢的字段以及分區過濾,從而減少加載的數據量。 Map端聚合配置:在map端驚醒聚合,減少shuffle過程; 謂詞下推:限制條件進行提前過濾,減少下游處理的數據量; 空值過濾:提前驚醒空值過濾,避免空值引起傾斜; 目前,hive中謂詞下推、map端聚合參數是默認開啓的。本文中簡單的

sqlserver

饕餮大數據 - 【Ambari開啓Kerberos】- Atlas啓動 - Solr權限異常

一、問題背景 Atlas 啓動報錯通常分兩階段: HBase 無權限(上文已有説明); Solr 401 Unauthorized(本篇重點)。 二、錯誤日誌分析 Atlas 啓動失敗時控制枱輸出如下堆棧信息: .springframework.beans.factory.support.

大數據 , yyds乾貨盤點 , Kerberos , 運維 , 開源 , Css , 前端開發 , HTML , Ambari

ApacheFlink - 雲棲實錄|馳騁在數據洪流上:Flink+Hologres驅動零跑科技實時計算的應用與實踐

本文根據 2025 雲棲大會演講整理而成,演講信息如下 演講人: 聶清 零跑汽車大數據高級專家 零跑科技的快速發展與數據挑戰 零跑科技成立於2015年12月,總部位於浙江杭州,是國內造車新勢力中唯一具備全域自研自造能力及垂直整合度最高的智能電動車企業。業務涵蓋整車設計、研發製造、智能駕駛等領域,始終致力於為用户創造價值。 特別值得一提的是,就在演講前一天,零跑迎來了第100萬台量產車的下

大數據 , flink , 實時計算

vivo互聯網技術 - 前端 JS 安全對抗原理與實踐

作者:vivo 互聯網安全團隊- Luo Bingsong 前端代碼都是公開的,為了提高代碼的破解成本、保證JS代碼裏的一些重要邏輯不被居心叵測的人利用,需要使用一些加密和混淆的防護手段。 一、概念解析 1.1 什麼是接口加密 如今這個時代,數據已經變得越來越重要,網頁和APP是主流的數據載體,如果獲取數據的接口沒有設置任何的保護措施的話,數據就會被輕易地竊取或篡改。 除了數據泄露外,一些重要功能

混淆 , 調試 , 前端 , Javascript

泊浮目 - 未來數據庫硬件-網絡篇

本文在綠泡泡“狗哥瑣話”首發於2025.2.17 -關注不走丟。 最近看到一篇不錯的文章,叫做“Modern Hardware for Future Databases”,裏面從幾個方向講了下現在數據庫的硬件發展趨勢,今天先來説説網絡篇。 內容中,一位大佬對(獲過圖靈獎的大佬)OLTP系統進行了一些基準測試,發現TCP-IP協議棧對於總體CPU使用率是佔在47~68%。如果使用的網絡帶寬增加,這

雲計算 , 架構 , 數據庫

趙渝強老師 - 【趙渝強老師】OceanBase的部署模式

為保證單一機器故障時同一分區的多數派副本可用,OceanBase數據庫會保證同一個分區的多個副本不調度在同一台機器上。由於同一個分區的副本分佈在不同的Zone/Region下,在城市級災難或者數據中心故障時既保證了數據的可靠性,又保證了數據庫服務的可用性,達到可靠性與可用性的平衡。OceanBase數據庫創新的容災能力有三地五中心可以無損容忍城市級災難,以及同城三中心可以無損容忍數據中心級故障。下

oracle , MySQL , oceanbase , 數據庫

StarRocks - 從 ClickHouse 到 StarRocks 存算分離: 攜程 UBT 架構升級實踐

作者:魏寧 攜程大數據平台開發專家 導讀: 在攜程龐大的數據體系中,UBT(User Behavior Tracking,用户行為追蹤系統)承擔着核心的用户行為採集與分析任務,日新增數據量高達 30 TB。為應對不斷增長的業務與性能需求,攜程技術團隊將 UBT 從 ClickHouse 遷移至 StarRocks 存算分離架構。 遷移後,系統實現了查詢性能從秒級到毫秒級的跨越——平均查詢耗

clickhouse , starrocks , SQL

北京辰輝創聚生物 - 重組蛋白技術基礎概述

重組蛋白的基本概念 重組蛋白是通過基因重組技術在宿主系統中表達的外源蛋白。該技術將目標基因導入表達載體,轉化至宿主細胞,利用細胞自身的轉錄翻譯機制合成目標蛋白。與傳統組織提取相比,重組技術可獲得更高純度、更好一致性的蛋白樣品。 重組蛋白的技術特徵 重組蛋白的生物學功能由其空間構象決定。氨基酸序列通過分子內氫鍵、疏水作用、二硫鍵等化學力形成特定三維結構。研

蛋白表達 , 大數據 , 細胞因子 , 重組蛋白 , 數據倉庫 , 生長因子 , 科研試劑

數據集成與治理 - 一文教你讀懂數據架構

我發現很多企業做數字化,都遇到過這些問題: 上了ERP、MES、SCADA等系統,但數據互不聯通; 想做個生產分析,發現數據在ERP裏,質量數據在MES裏,設備數據又在另一個系統; 領導想看實時生產情況,IT部門卻要花好幾天整理數據。 但説到底,我們不是沒有數據,而是缺少一套能夠打通數據、真正服務業務的數據架構。 一、先搞清楚什麼是數據架構 一提到“架構”,有人覺得是 IT 部門的“技術

數據結構 , 架構設計

阿森CTO - 內聯函數和auto關鍵推導和指針空值

@TOC 📝內聯函數 內聯函數是一種編譯器優化技術,它可以將函數的代碼直接插入到函數調用的地方,而不是通過函數調用的方式。這樣可以減少函數調用的開銷,提高程序的執行效率。 舉個例子,當你在一個項目中,想要頻繁調用一個Add函數 int Add(int x, int y) { return x + y; } 當你調用一千次

數組 , 大數據 , yyds乾貨盤點 , 數據倉庫 , 編譯器 , 內聯函數

代碼匠心 - 從零開始學Flink:事件驅動

在實時計算領域,很多業務邏輯天然適合“事件驅動”模式:當事件到達時觸發處理、在某個時間點觸發補償或彙總、根據狀態變化發出告警等。Apache Flink 為此提供了強大的 ProcessFunction 家族(KeyedProcessFunction、CoProcessFunction、BroadcastProcessFunction 等),它們在算子層面同時具備“事件處理 + 定時器 + 狀態”

大數據 , 事件驅動 , JAVA , flink , 數據處理

我就是不長肉而已 - SBD1DF100V2H-ASEMI可直接替代安世PMEG10020AELR-QX

編輯:ll SBD1DF100V2H-ASEMI可直接替代安世PMEG10020AELR-QX 型號:SBD1DF100V2H 品牌:ASEMI 封裝:SOD-123FL 正向電流:2A 反向電壓:100V 正向壓降:0.44V~0.47V 引線數量:2 芯片個數:1 芯片尺寸:MIL 漏電流:10ua 恢復

ASEMI , 大數據 , hadoop , SBD1DF100V2H , 在51CTO的第一篇博文 , 肖特基二極管

青雲交技術圈 - Java 大視界 -- Java 大數據在智能體育賽事運動員體能監測與訓練計劃調整中的應用

(centerJava 大視界 -- Java 大數據在智能體育賽事運動員體能監測與訓練計劃調整中的應用/center) 引言 嘿,親愛的 Java 和 大數據愛好者們,大家好!我是CSDN(全區域)四榜榜首青雲交!當體育競技的號角愈發激昂,運動員每一次成績突破的背後,都藏着體能科學與訓練智慧的較量。傳統的體能監測和訓練模式,如同用舊地圖探索新大陸,數據零散、分析滯後,早已無法滿

spark , Java 大數據 , 大數據 , yyds乾貨盤點 , 數據 , 訓練計劃 , JAVA , 智能體育

合合技術團隊 - 啓信寶電影行業洞察:廣東蟬聯“雙冠王”,票房與企業數量全國第一

國家電影局數據顯示,2024年全國觀影總人次為10.1億,同比下滑23.1%。與此同時,啓信寶統計數據顯示,電影相關企業數量在五年內翻了三番,年均增速超25%。電影行業呈現“冰火兩重天”的態勢。 “消費端收縮、供給端活躍”的現象,勾勒出中國電影產業在深度調整期的真實圖景。近日,啓信寶發佈的《2025電影行業觀察報告》指出,行業的增長動力已從市場擴容轉向結構升級,資源向頭部企業、核心地域與AI技術高

大數據 , 算法 , 人工智能