收藏 / 列表

developer-tianyiyun 頭像

天翼雲開發者社區 - openresty中使用ngx.sleep(0)防止worker進程阻塞

本文分享自天翼雲開發者社區《openresty中使用ngx.sleep(0)防止worker進程阻塞》.作者：小謝不用謝 1. ngx.sleep(0)的工作原理 在OpenResty中，ngx.sleep(0)函數的作用是讓當前的Lua協程主動放棄CPU執行權，以便Nginx能夠及時處理其他併發請求和I/O操作。具體來説，調用ngx.sleep(0)會使當前協程在下一個Nginx事件處理週

網絡安全

ververica 頭像

ApacheFlink - Flink 智能調優：從人工運維到自動化的實踐之路

作者：黃睿阿里雲智能集團產品專家 本文基於阿里雲Flink平台的實際實踐經驗整理，希望能為廣大流計算從業者提供有價值的參考。 引言 在流計算領域，ApacheFlink作為業界領先的流處理引擎，為眾多企業提供了強大的實時數據處理能力。然而，隨着業務規模的不斷擴大和數據量的持續增長，如何確保Flink作業能夠長期穩定運行，同時實現資源的高效利用，成為了每個技術團隊都必須面對的核心挑戰。 根據前期用户

大數據 , flink , 實時計算

doge_king 頭像

泊浮目 - 未來數據庫硬件-網絡篇

本文在綠泡泡“狗哥瑣話”首發於2025.2.17 -關注不走丟。 最近看到一篇不錯的文章，叫做“Modern Hardware for Future Databases”，裏面從幾個方向講了下現在數據庫的硬件發展趨勢，今天先來説説網絡篇。 內容中，一位大佬對（獲過圖靈獎的大佬）OLTP系統進行了一些基準測試，發現TCP-IP協議棧對於總體CPU使用率是佔在47～68%。如果使用的網絡帶寬增加，這

雲計算 , 架構 , 數據庫

u_15459354 頭像

ApacheSeaTunnel - 深陷 Sqoop+Canal 困境？中控技術用 SeaTunnel 打造高效數據採集破局方案

核心數據一致性達99.99%、開發效率提升50%、運維成本降低70%——這是中控技術採用 Apache SeaTunnel 構建數據採集框架及相關數據服務體系後的實測成效。 上週 Apache SeaTunnel 線上 Meetup 上，中控技術工程師崔俊樂分享了這家大型工業 AI 平台型公司的實踐經驗。我們已將視頻內容整理成文，供行業同仁參考借鑑。 作者簡介 崔俊樂，中控技

spark , 大數據 , 運維 , 開源 , seatunnel , apache

ruozxby 頭像

不語 - IDEA開打jsp頁面亂碼問題解決

問題：IDEA開打jsp頁面亂碼問題解決 解決： 1 先把Idea配置：File–Settings–File Encodings–Project Encoding 設置為UTF-8 2 jsp文件中添加： %@ page language="java" contentType="text/html; charset=utf-8" pageEncoding="utf-8" %

編碼 , JAVA , jsp , 程序員 , Javascript

kamier 頭像

kamier - 【Hadoop】HBase系統解析及適用場景

一、HBase產生背景 在大數據時代，傳統的關係型數據庫（如Mysql、Oracle）在大數據量下的併發讀寫及可拓展性方面遇到瓶頸，尤其是處理海量的非結構化、半結構化數據時效率較低，而Hadoop的HDFS雖然支持海量數據的存儲以及批處理，但其無法支持隨機讀寫和低延遲查詢（HDFS 中的文件一旦寫入不能修改，只能追加），所以HBase被設計出來，彌補了HDFS在實時訪問能力上的不足。 HBase是

hdfs , 大數據 , hadoop , hbase

u_16099247 頭像

墨韻流香 - 人臉素描數據集

OpenCV實時素描效果：用代碼將攝像頭畫面轉化為藝術素描 實現原理與可視化流程 運行前請安裝OpenCV：`pip install opencv-python`，如攝像頭無法打開請嘗試調整`VideoCapture(0)`或`VideoCapture(1)`參數。 素描效果的核心思想是模擬藝術家繪製素描時的視

spark , 大數據 , 人工智能 , 計算機視覺 , opencv , ide , Python

u_15879876 頭像

Aloudata - 如何找到適合好用的 AI 數據分析軟件？實用指南

AI 數據分析軟件顯著提升企業決策精準性與敏捷性 在數字經濟時代，數據已經成為企業最核心的生產要素，無論是戰略規劃、市場策略調整，還是日常運營優化，都依賴於對數據的深度洞察。而 AI 數據分析軟件則是將數據轉化為決策力的關鍵工具。 傳統數據分析依賴人工處理與經驗判斷，存在“響應慢”、“分析不靈活”、“誤差率高”等問題，難以滿足快速變化的市場需求。AI 數據分析軟件則通

自然語言問數 , 大數據 , 數據倉庫 , dataagent , 數據分析 , 智能問數 , chatbi

u_17558081 頭像

饕餮大數據 - MDEP-187 從根因到修復

温馨提示 此內容版本在 ttr-2.2.1 已經修復,低於該版本需要手動處理。有任何問題可以聯繫作者，或者訪問 TTBigdata知識庫 獲取其他技術支持。 一、問題背景 在編譯 Ambari Views 模塊時，常會遇到以下錯誤： 典型報錯信息如下： [DEBUG] (f) session = org.apache

大數據 , yyds乾貨盤點 , Bigtop , 運維 , hadoop , 開源大數據 , Ambari

leguandeludeng 頭像

數據集成與治理 - 一文講清數據要素，數據資產，數據治理和數字資產

我前些年在做數據支持的時候，每到開會時總會聽到： 業務部門説盤活數據資產，技術團隊卻在強調必須先做好數據治理； 管理層要求要釋放數據價值，財務部門卻在質疑：這些數據投入到底能帶來多少實際收益？ 更麻煩的是，不同團隊對同一個數據指標的理解各不相同，導致報表數據對不上，會議時間都浪費在基礎概念的爭論上。 這些問題，其實就是沒把數據要素、數據資產、數據治理和數字資產幾個核心概念理清楚。 接下來，

大數據 , 教程 , 數據可視化 , 知識 , 數據庫

u_15844731 頭像

阿森CTO - 內聯函數和auto關鍵推導和指針空值

@TOC 📝內聯函數 內聯函數是一種編譯器優化技術,它可以將函數的代碼直接插入到函數調用的地方,而不是通過函數調用的方式。這樣可以減少函數調用的開銷,提高程序的執行效率。 舉個例子，當你在一個項目中，想要頻繁調用一個Add函數 int Add(int x, int y) { return x + y; } 當你調用一千次

數組 , 大數據 , yyds乾貨盤點 , 數據倉庫 , 編譯器 , 內聯函數

ruanjiankaifa_xiaofanya 頭像

軟件部長 - 函數公式在低代碼流程、邏輯、表單、列表頁的使用場景解析

在數字化浪潮席捲企業的今天，如何讓業務系統真正"懂業務"？函數公式作為連接業務邏輯與系統能力的橋樑，成為提升平台靈活性與擴展性的核心要素。 在低代碼平台中，函數公式可以在各個場景中使用：從列表頁動態交互控制到表單數據智能初始化，從邏輯引擎自動化決策到流程分支條件配置，函數公式通過將業務規則轉化為可執行的代碼邏輯，實現了從靜態配置到動態響應的跨越式升級。為低代碼平台注入了"所見即所得"的智能基

函數 , 低代碼 , 低代碼開發平台

kpaas 頭像

KPaaS集成擴展平台 - 主數據實時同步：為什麼 CIO 要優先考慮？

越來越多 CIO 開始意識到：技術架構可以迭代，應用系統可以替換，但數據的一致性與可信度，才是決定數字化成敗的底層基石。而在所有數據類型中，主數據（Master Data）——如客户、供應商、物料、組織架構等核心業務實體——因其跨系統、高複用、強關聯的特性，成為數據治理的“牛鼻子”。 然而，現實卻令人憂心：銷售在 CRM 中錄入的客户信息，與財務在 ERP 中使用的客户編碼

主數據管理 , 大數據 , yyds乾貨盤點 , 數據孤島解決方案 , MDM , 數據倉庫 , 異構數據整合 , 數據一致性

starrocks 頭像

StarRocks - StarRocks 4.0：FlatJSON，讓 JSON 查詢像列存一樣高效

導讀： StarRocks 4.0 已正式發佈！這一版本帶來了多項關鍵升級。本篇聚焦 JSON 查詢性能的系統性提升——通過全新的 FlatJSON 列式存儲與執行優化機制，StarRocks 4.0 讓 JSON 在實時分析場景中具備接近原生列存的性能。 無論是日誌、埋點還是 IoT 數據，用户都無需額外 ETL，即可直接對 JSON 進行高性能查詢分析，真正讓“靈活的數據結構”與“高效

數據庫 , starrocks , 數據查詢 , Json

u_15316473 頭像

阿里雲大數據AI技術 - 【跨國數倉遷移最佳實踐 12】阿里雲 MaxCompute 實現 BigQuery 10 萬條 SQL 智能轉寫遷移

作者：曹霖 本系列文章將圍繞東南亞頭部科技集團的真實遷移歷程展開，逐步拆解BigQuery遷移至MaxCompute過程中的關鍵挑戰與技術創新。本篇為第十二篇，基於阿里雲MaxCompute實現BigQuery10萬條SQL智能轉寫遷移。 注：客户為東南亞頭部科技集團，文中用GoTerra表示。 一、項目背景 在全球化和數字化加速

MaxCompute , 大數據 , 數據倉庫 , 數據遷移 , 阿里雲 , SQL

selectdb 頭像

SelectDB技術團隊 - SelectDB 實時分析性能突出，寶舵成本鋭減與性能顯著提升的雙贏之旅

BOCDOP 寶舵早期基於 TiDB 構建實時數倉，隨着數據量增長，在數據處理效率、OLAP 能力擴展、功能支持、成本與資源方面存在一定優化空間。為提升數據分析能力並優化成本，寶舵引入 SelectDB，達成寫入速度提升 10 倍，成本直降 30% 的顯著成效。 本文轉錄自高瑞軍（寶尊科技 高級架構師）在 Doris Summit Asia 2024 上的演講，經編輯整理。 業務背景 寶尊集團創立

大數據 , 數據倉庫 , 實時 , 數據庫 , 電商

daimajiangxin 頭像

代碼匠心 - 從零開始學Flink：流批一體的執行模式

在大數據處理領域，批處理和流處理曾經被視為兩種截然不同的範式。然而，隨着Apache Flink的出現，這種界限正在逐漸模糊。Flink的一個核心特性是其批流一體的架構設計，允許用户使用統一的API和執行引擎處理有界數據（批處理）和無界數據（流處理）。本文將深入探討Flink的執行模式（Execution Mode），特別是在Flink 1.20.1版本中對批處理和流處理模式的支持和優化。 一、F

大數據

u_16272508 頭像

事辯天下 - 星期零升級版雞蛋豆腐上架山姆

近日，星期零煥新升級的雞蛋豆腐在山姆會員商店全國門店正式上架。相較此前版本，新品在原料、營養與包裝等多方面實現迭代，同時保留了開盒即食和多樣化烹飪的便利性，為日常餐桌提供更豐富的蛋白選擇。 在此次產品升級中，星期零在原有非轉基因黃豆的基礎上，新增來自東北的一 級黑豆原料，形成“黃豆+黑豆”的雙豆配方。黑豆富含優質植物蛋白及膳食纖維，近年來在豆製品創新中獲得了

大數據 , 數據 , 數據倉庫 , 應用場景 , 迭代

yunrizhi_daishuyun 頭像

雲掣科技 - 開源大數據集羣部署（八）Ranger編譯部署

作者：櫰木 在hd1.dtstack.com主機root權限下操作。 1、 編譯ranger ranger二進制包編譯過程在本次過程中不做詳細説明。簡單説明如下： 在pom.xml中更改對應hadoop集羣組件版本。 ranger2編譯前提條件是python3和mvn已安裝完成。 編譯命令： mvn clean compile package install -Pranger-jd

部署 , 大數據 , 集羣