tag apache

標籤
貢獻80
133
05:12 PM · Oct 25 ,2025

@apache / 博客 RSS 訂閱

雲端行者 - hadoop二版本增加了什麼 hadoop2.7.6

Hadoop2.7.6學習 Hadoop的發展史 Google 爬取全球的網站,然後計算頁面的PageRank 要解決網站的問題: a:這些網站怎麼存放 b:這些網站應該怎麼計算 發佈了三篇論文 a:GFS(Google File System) b:MapReduce(數據計算方法)

大數據 , 數據 , hadoop , hadoop二版本增加了什麼 , apache

收藏 評論

IT劍客行 - dolphinscheduler工作流hive kerberos

第1章 DolphinScheduler簡介 1.1 DolphinScheduler概述 Apache DolphinScheduler是一個分佈式、易擴展的可視化DAG工作流任務調度平台。致力於解決數據處理流程中錯綜複雜的依賴關係,使調度系統在數據處理流程中開箱即用。 1.2 DolphinScheduler核心架構 Dolp

大數據 , MySQL , hive , hadoop , apache

收藏 評論

藍易雲 - 藍易雲cdn:服務器Linux系統配置mysql數據庫主從自動備份

下面給你一套在服務器 span style="color:red;"Linux/span 上落地 span style="color:red;"MySQL 主從/span + span style="color:red;"自動備份/span 的“可上線”方案(以 span style="color:red;"MySQL 8.0/8.4/span 常見語法為準),兼顧穩定性與可維護性。🔧 1)整

kubernetes , devops , serverless , Docker , apache

收藏 評論

我有一個大目標你信不信 - Apache 與 Nginx 服務器優缺點對比

Apache 和 Nginx 是目前最主流的兩款開源網頁服務器,核心作用都是發佈網站內容,但設計理念、性能特點和適用場景差異很大,下面用直白的語言對比清楚: 特性 Apache 服務器

服務器 , 高併發 , Nginx , apache

收藏 評論

智能創新夢想家 - Java讀取excel表格(原理+實現)

一、引言 在企業應用中,Excel 是一種常見的數據存儲和交換格式。Java 通過 Apache POI 庫可以高效地讀取、修改和寫入 Excel 文件。本文介紹如何使用 Java 處理 Excel 文件,包括讀取、寫入和修改數據。 二、環境準備 2.1 安裝 Java 開發環境 下載並安裝 Java SDK:Oracle JDK 下載

System , JAVA , Css , 前端開發 , apache , HTML

收藏 評論

SelectDB技術團隊 - 雲上數據安全新範式:Apache Doris IAM Assume Role 解鎖無密鑰訪問 AWS S3 數據

一、傳統 AK/SK 方式訪問 AWS 資源存在的問題 密鑰管理困境: 長期暴露風險:靜態 AK/SK 需硬編碼於配置文件中,一旦因代碼泄露、誤提交或惡意竊取導致密鑰擴散,攻擊者可永久獲得等同於密鑰所有者的完整權限,引發持續性的數據泄露、資源篡改及資金損失風險; 審計盲區: 多用户/多服務共享同一組密鑰時,雲操作日誌僅記錄密鑰身份而無法關聯具體使用者,無法追溯真實責任人或業務模塊; 運維成

數據庫 , 數據安全 , dorisdb , apache

收藏 評論

阿里雲開發者 - 快手基於 Apache Flink 的實時數倉建設實踐

一、快手實時數倉的發展 作為短視頻領域的領頭羊,快手 APP 一直致力於視頻、直播技術的迭代,其背後對數據實時性、準確性的要求非常高,這對於數倉體系的構建也提出了新的挑戰。 下面是快手實時數倉發展到現在經歷的幾個階段: 在第一個階段,快手的實時數倉起始於春節、國慶、快手之夜等大型活動場景。在這些活動場景下,實時數據主要用於滿足活動大屏、運營看板、活動效果監控等實時需求。在這個階段

構建工具 , 數據 , 數據倉庫 , flink , apache

收藏 評論

SelectDB技術團隊 - 字節跳動:Apache Doris + AI 一站式融合數據引擎的探索與實踐

隨着人工智能技術在業務中的滲透,我們逐漸意識到:AI 不僅是提升效率的工具,更是重構數據處理與消費方式的核心驅動力。在這一背景下,我們思考:能否構建一款「AI + Data」一站式融合的數據引擎? 它不僅能夠統一處理文本、音視頻等非結構化數據與傳統結構化數據,還能為算法工程師提供流暢的數據開發體驗,實現數據處理與 AI 模型無縫銜接,並能確保數據處理負載與在線服務負載完全隔離。這是 2024 年末

字節跳動 , 數據庫 , apache

收藏 評論

智能探索者之家 - Flink源碼解讀系列 | Flink集羣Standalone啓動腳本 -

前文中,我們已經瞭解了 Flink 的三種執行圖是怎麼生成的。今天繼續看一下 Flink 集羣是如何啓動的。 前文中,我們已經瞭解了 Flink 的三種執行圖是怎麼生成的。今天繼續看一下 Flink 集羣是如何啓動的。 啓動腳本 集羣啓動腳本的位置在: flink-dist/src/main/flink

後端開發 , flink , 啓動流程 , apache , Python

收藏 評論

SelectDB技術團隊 - 為什麼實時更新場景下 Doris 查詢性能是 ClickHouse 的 34 倍

在當今數據驅動的商業環境中,企業越來越依賴數據分析來驅動決策。無論是用户行為分析、業務報表還是運營監控,企業都需要具備快速、高效的數據處理能力。企業在數據分析能力上的演進,往往始於 TP(事務處理)系統,隨着業務發展不斷探索 TP 系統的擴展方案,最終走向構建獨立的 AP(分析處理)系統。 企業實時分析典型演進過程 第一階段:使用 TP 系統支撐事務處理和數據分析 在企業信息系統建設的早期,主要存

elasticsearch , 數據庫 , apache

收藏 評論

藍易雲 - 藍易雲cdn:div+css詳解

藍易雲CDN:span style="color:red"div + CSS/span 一次講透(能直接落地)🙂 在控制枱、產品頁、活動海報頁裏,span style="color:red"div/span本質是“結構容器”,span style="color:red"CSS/span負責“視覺與交互”。把這兩者用對,你的頁面會同時具備:span style="color:red"信息層級清晰/

kubernetes , devops , serverless , Docker , apache

收藏 評論

阿里云云原生 - Apache Dubbo 下一代雲原生微服務挑戰賽啓動報名!五大賽題 50 萬獎金池

Apache Dubbo 是一款微服務框架,為大規模微服務實踐提供高性能 RPC 通信、流量治理、可觀測性等解決方案,涵蓋 Java、Golang 等多種語言 SDK 實現。隨着越來越多的企業遷移上雲,單位算力的成本在逐漸的下降。這使得在雲原生如何構建下一代微服務體系成為一項挑戰,Dubbo3 創新性的提出了 Triple 協議、應用級服務發現、可觀測體系等解決方案。 通過本項賽事,我們期望參賽團

dubbo , 阿里雲 , 雲原生 , apache

收藏 評論

ApacheAnswer - Apache Answer 參與首次 ALC Hangzhou 線下聚會

5 月 28 日,Apache Local Community Hangzhou (ALC Hangzhou) 首次線下聚會順利舉辦。Apache Answer 作為 ALC Hangzhou 初始成員受邀參加。Answer 大部分 PPMC 成員均參加了活動,其中 PPMC 成員祁寧介紹了社區 Roadmap,並就社區運營、開源社區開發者貢獻量等話題分享了 Answer 的最新實踐成果。此外,A

社區 , apache-answer , 開源 , apache

收藏 評論

u_14767244 - 從 Flink 到 Doris 的實時數據寫入實踐——基於 Flink CDC 構建更實時高效的數據集成鏈路

Flink-Doris-Connector 作為 Apache Flink 與 Doris 之間的橋樑,打通了實時數據同步、維表關聯與高效寫入的關鍵鏈路。本文將深入解析 Flink-Doris-Connector 三大典型場景中的設計與實現,並結合 Flink CDC 詳細介紹了整庫同步的解決方案,助力構建更加高效、穩定的實時數據處理體系。 一、Apache Doris 簡介 A

數據同步 , 大數據 , 數據 , 數據倉庫 , apache

收藏 評論

mob64ca13f9a97c - wiki 怎麼部署到本地 支持docker 一鍵部署嗎

先準備好軟件: Apache:apache_2.0.63-win32-x86-no_ssl.msi Php:php-5.2.8-Win32.zip Mysql:mysql-5.0.67-win32.zip (mysql 用户界面工具mysql-gui-tools-5.0-r14-win32.msi) Hdwiki:

MySQL , 雲計算 , php , 配置管理 , Docker , apache , ie

收藏 評論

泰克教育 - 泰漲知識 | Hadoop的IO操作——壓縮/解壓縮

一、 壓縮案例(DEFLATE) import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.io.IOUtils; import org.apache.hadoop.io.compress.CompressionCodec;

大數據 , hive , hadoop , JAVA , apache

收藏 評論

mob64ca1400bfa8 - httpclient 複用session

在一些項目中,可能有多個服務器,每個服務器都有session,但,同一個用户,我們肯定是希望只存在同一個session。比如,用户的多端登錄。這樣的話,我們就需要使用session複製,或者redis、memcache等緩存來實現,這裏,介紹tomcat下的session複製。 1.部署兩個tomcat 因為我是單機試驗,所以就部署兩個不同端口的tomcat,80

tomcat , 架構 , 後端開發 , apache , HTML

收藏 評論

墨舞青雲 - 大數據--數據倉庫3--數據質量/元數據/數據治理

5.2 元數據 5.2.1 工具 數倉開源元數據項目對比(Apache Atlas、Apache Gravitino、DataHub、OpenMetadata、Amundsen、Metacat、Marquez) 5.2.1.1 起源與發展歷程

大數據 , 數據 , 數據治理 , 元數據 , jquery , 前端開發 , apache

收藏 評論

SelectDB技術團隊 - 從 Flink 到 Doris 的實時數據寫入實踐——基於 Flink CDC 構建更實時高效的數據集成鏈路

Flink-Doris-Connector 作為 Apache Flink 與 Doris 之間的橋樑,打通了實時數據同步、維表關聯與高效寫入的關鍵鏈路。本文將深入解析 Flink-Doris-Connector 三大典型場景中的設計與實現,並結合 Flink CDC 詳細介紹了整庫同步的解決方案,助力構建更加高效、穩定的實時數據處理體系。 一、Apache Doris 簡介 Apache Dor

數據庫 , apache

收藏 評論

浪人小風光 - 大數據Hadoop技術的發展歷史與未來前景_hadoop的未來發展方向

2025 年排名前 15 位的大素材技巧,它們具備不同的架構、性能特性與應用場景,可滿足各類組織的多樣化需求。下文將深入介紹這些領先的大數據工具與框架。就是大信息科技不斷髮展,以應對日益增長的數據量、數據速度與內容多樣性等挑戰。以下 Apache Hadoop。Apache Hadoop 是大數據領域的基礎性框架,可提供可靠、可擴展的分佈式計算環境,非常適

大數據 , 數據 , hadoop , 應用場景 , apache

收藏 評論

mb682da1c57062a - 跨境電商運營半年總結:Apache環境下,這個免費工具幫我保住30%訂單

做跨境户外裝備電商兩年,今年才算真正摸到“穩定運營”的門道。上半年旺季前,我差點因為服務器的各種麻煩放棄拓展歐洲市場——3月份新品上架時,後台突然涌入大量重複請求,商品詳情頁加載慢到3秒以上,當天轉化率直接跌了40%,用基礎款價格拍下高端套裝,核實後只能要麼虧本發貨要麼賠償違約金,光這兩項損失就超5000元。 那段時間試了不少辦法,付費的防護工具看了一圈,年費基本都在200

指尖人生 , 服務器 , 網絡安全 , Docker , apache

收藏 評論

索姆拉 - 虛擬集羣搭建日記2——克隆虛擬機以及實現互通

文章目錄 1.關閉防火牆(三台虛擬機都需要關閉) 查看防火牆的狀態 永久關閉 firewalld 防火牆(推薦方法) 2.查看是否具有ssh服務 3.準備節點(克隆虛擬機) 4.MAC地址和IP地址 5.修改主機名 6.網絡與主機名映射 7.重啓網絡 8.節點之

服務器 , ip , hadoop , Linux , 前端開發 , apache , Javascript

收藏 評論

阿里云云原生 - AgentScope x RocketMQ:打造企業級高可靠 A2A 智能體通信基座

作者:琛琪、稚柳 引言 Agentic AI 時代已至,在智能客服、代碼生成、流程自動化等場景中,多智能體(Multi-Agent)協作正從構想走向落地。然而,當多個 Agent 需要像一個團隊那樣高效協作時,脆弱的通信機制可能因網絡抖動或服務宕機,就讓整個系統瞬間癱瘓,導致昂貴的計算任務失敗、會話狀態丟失。 如何為這些聰明的“數字員工”們構建一個真正可靠、高效的通信基座? 本文將為您介紹 Apa

rocketmq , 雲原生 , apache

收藏 評論