tag 大數據

標籤
貢獻385
276
05:15 PM · Oct 25 ,2025
tech 頭像 elhix0bg 頭像 nebulabio 頭像 u_16272508 頭像 u_15844731 頭像 u_14767244 頭像 dolphinscheduler 頭像 ververica 頭像 seatunnel 頭像 zhaoqianglaoshi 頭像 huikaichedemianbao 頭像 u_17602582 頭像

@大數據 / 博客 RSS 訂閱

u_14767244 頭像

u_14767244 - SelectDB 在 AWS Graviton ARM 架構下相比 x86 實現 36% 性價比提升

在海量數據分析中，追求高性價比已成為各大企業的主流趨勢。ARM 架構憑藉其高能效和低成本的特點，逐漸在數據中心崛起，成為理想的高性價比選擇。基於 ARM 架構的 AWS Graviton 系列處理器，正是這一趨勢的典型代表。Graviton 處理器不僅在計算性能上表現優異，同時顯著降低了運行成本，尤其在數據密集型任務中展現出明顯優勢。與傳統的 x86 架構處理器相比，Graviton 提

AWS , 大數據 , 數據倉庫 , 性能比較 , 數據處理

收藏 評論

u_15591410 頭像

我就是不長肉而已 - BAT54CW-ASEMI可直接替代安世BAT54CW

編輯：ll BAT54CW-ASEMI可直接替代安世BAT54CW ASEMI首芯半導體可替代安氏半導體功率器件 型號：BAT54CW 品牌：ASEMI 封裝：SOT-323 特性：肖特基二極管 正向電流：0.1A 反向耐壓：30V 恢復時間：35ns 引腳數量：2 芯片個數：1 芯片尺寸：MIL 浪涌

ASEMI , 大數據 , BAT54CW , hadoop , 在51CTO的第一篇博文 , 肖特基二極管

收藏 評論

u_16272508 頭像

事辯天下 - 奧哲2025未來企業大會｜智現新生12月5日開啓！

彷彿AI早已觸手可及，為何企業佈局AI仍如履薄冰？ 當AI浪潮奔涌而至，企業佈局AI卻深陷迷局：投資與回報難以衡量、人才與組織出現斷層、技術與業務割裂、藍圖難以落地兑現價值。企業AI究竟從何做起，由誰來做，如何落地？企業亟需一場破土新生的變革。 在這關鍵轉折點，奧哲在12月5日隆重舉辦「智現新生 | 2025未

it , 大數據 , 數據 , 數據倉庫 , 企業級

收藏 評論

ververica 頭像

ApacheFlink - Flink Agents 0.1.0 發佈公告

ApacheFlink社區很高興地宣佈發佈ApacheFlinkAgents的首個預覽版本（0.1.0）。 什麼是ApacheFlinkAgents ApacheFlinkAgents是ApacheFlink的全新子項目，用於在Flink的流處理運行時之上直接構建事件驅動的AI智能體。它在同一框架內統一了流處理與自主智能體能力，將Flink在規模、低時延、容錯能力和狀態管理方面的成熟優勢，與構建智

大數據 , flink , 實時計算

收藏 評論

lu952450497 頭像

lu952450497 - 數據建模中不同模型的區別與適用場景的討論

數據建模是數據開發體系中的核心環節，它直接決定數據資產質量、可維護性、複用能力，以及最終對業務價值的支撐能力。建模不是單純字段命名與表結構設計，而是一套體系化的抽象方法論。此文將從模型體系説明開始，逐一拆解建模方式區別、典型適配場景與落地難點。 1. 為什麼需要數據建模 數據建模目標並非“定義表結構”，而是實現： 指標口徑統一 跨主題數據複用

大數據 , 建模 , 數據 , 數據倉庫 , 複用

收藏 評論

alijishu 頭像

阿里雲開發者 - Serverless工作流如何集成http的fc函數運算？

事件函數只能通過event向函數傳遞數據 完整內容請點擊下方鏈接查看： https://developer.aliyun.com/ask/499354?utm_content=g_1000371491 版權聲明：本文內容由阿里雲實名註冊用户自發貢獻，版權歸原作者所有，阿里雲開發者社區不擁有其著作權，亦不承擔相應法律責任。具體規則請查看《阿里雲開發者社區用户服務協議》和《阿里雲開發者社區知識產權保護

函數 , 大數據 , event , 阿里雲 , serverless

收藏 評論

elhix0bg 頭像

阿里雲大數據AI - 鷹角：EMR Serverless Spark 在《明日方舟》遊戲業務的應用

作者：鷹角網絡高級大數據研發 茅旭輝 背景介紹 鷹角網絡是一家年輕且富有創新的遊戲公司，致力於開發充滿挑戰性和藝術價值的遊戲產品。公司目前涵蓋了遊戲開發、運營和發行的全生命週期業務。隨着業務的擴展，鷹角網絡從單一爆款遊戲發展到多賽道、多平台、全球化的戰略佈局，在數據業務上進行了全面的優化和升級。 從業務上看，以《明日方舟》為代表的長線運營遊戲，具有相對高頻的活動週期和豐富多樣的活動玩法，反映到數據

spark , 大數據 , 數據 , 阿里雲 , serverless

收藏 評論

u_16213716 頭像

mob64ca141834d3 - 大數據之Hive安裝配置

Hive 安裝配置教程 (Deepin/Ubuntu) 一、環境準備 1. 前置條件 ✅ JDK 8 已安裝 ✅ Hadoop 已安裝並正常運行 ✅ MariaDB 已安裝並配置好 Hive 數據庫 Hive 版本: 3.1.3 (推薦) 安裝路徑: /usr/local/hive

大數據 , hive , 數據庫 , aigc , bard

收藏 評論

u_16099225 頭像

數據探索者11 - Linux 系統時間同步方法小結 -

在 Linux 系統中，同步時間涉及 系統時間（System Time） 和 硬件時間（Hardware Clock 或 RTC, Real-Time Clock）。系統時間由 Linux 內核管理，主要用於操作系統運行時的計時和任務調度；硬件時間則由主板上的時鐘芯片維護，即使關機也會繼續運行。 以下是同步時間的方法以及如何同步硬件時間的具體步驟：

大數據 , hadoop , 系統時間 , bash , 時間同步

收藏 評論

my_sunmy 頭像

園陌 - 寫給初學者，一文搞懂大數據學習、崗位、面試及簡歷

最近有讀者私聊我時發現有不少應屆生和初學者，他們在大數據怎麼學，以及大數據怎麼面試，簡歷怎麼寫等方面有很大的困擾，今天我們就來談談關於大數據的一些事。 寫在前面：每個人的學習方法可能不一樣，只有找到適合自己的才是最好的，以下這些只是我在學習大數據時的一些總結及經驗，有不全面的地方還請各位大佬多包涵，互相學習，共同進步，非常感謝！ 我之前在知乎回答過類似的問題，有人問大數據工程師的日常工作內容是幹嘛

大數據 , 面試 , 學習方法

收藏 評論

u_16272508 頭像

事辯天下 - 星期零升級版雞蛋豆腐上架山姆

近日，星期零煥新升級的雞蛋豆腐在山姆會員商店全國門店正式上架。相較此前版本，新品在原料、營養與包裝等多方面實現迭代，同時保留了開盒即食和多樣化烹飪的便利性，為日常餐桌提供更豐富的蛋白選擇。 在此次產品升級中，星期零在原有非轉基因黃豆的基礎上，新增來自東北的一 級黑豆原料，形成“黃豆+黑豆”的雙豆配方。黑豆富含優質植物蛋白及膳食纖維，近年來在豆製品創新中獲得了

大數據 , 數據 , 數據倉庫 , 應用場景 , 迭代

收藏 評論

daimajiangxin 頭像

代碼匠心 - 從零開始學Flink：流批一體的執行模式

在大數據處理領域，批處理和流處理曾經被視為兩種截然不同的範式。然而，隨着Apache Flink的出現，這種界限正在逐漸模糊。Flink的一個核心特性是其批流一體的架構設計，允許用户使用統一的API和執行引擎處理有界數據（批處理）和無界數據（流處理）。本文將深入探討Flink的執行模式（Execution Mode），特別是在Flink 1.20.1版本中對批處理和流處理模式的支持和優化。 一、F

大數據處理 , 大數據 , JAVA , flink

收藏 評論

u_14256 頭像

laojean - DB25交叉線

RS-232、RS-422與RS-485都是串行數據接口標準，RS-232是PC機與通信中應用最廣泛的一種串行接口。RS-232被定義為一種在低速率串行通訊中增加通訊距離的單端標準。RS-232採取不平衡傳輸方式，即所謂單端通訊，而RJ45接口通常用於數據傳輸，最常見的應用為網卡接口。 RS-232是為點對點(即只用一對收、發設備)

大數據 , DB25交叉線 , 數據倉庫 , 422器件與lvds接收器的區別 , rs232接口 , rj45接口線序 , rs232 距離

收藏 評論

nebulabio 頭像

北京辰輝創聚生物 - 重組蛋白技術基礎概述

重組蛋白的基本概念 重組蛋白是通過基因重組技術在宿主系統中表達的外源蛋白。該技術將目標基因導入表達載體，轉化至宿主細胞，利用細胞自身的轉錄翻譯機制合成目標蛋白。與傳統組織提取相比，重組技術可獲得更高純度、更好一致性的蛋白樣品。 重組蛋白的技術特徵 重組蛋白的生物學功能由其空間構象決定。氨基酸序列通過分子內氫鍵、疏水作用、二硫鍵等化學力形成特定三維結構。研

蛋白表達 , 大數據 , 細胞因子 , 重組蛋白 , 數據倉庫 , 生長因子 , 科研試劑

收藏 評論

u_16213624 頭像

mob64ca140234eb - SDN解決了openstack neutron什麼問題

SDN應用第一反應就是數據中心，可見SDN在數據中心方面的應用得到了很大認可。SDN確實可以幫助數據中心掙脱目前的困境，但是SDN技術尚未成熟，還有一系列問題亟待解決。前途是光明的，道路是曲折的。 摘要： 是近年來繼雲計算後，學術界和產業界最關注的熱點，被國際研究機構Gartner列

虛擬化 , sdn , 大數據 , 雲計算 , OpenStack , 運維 , 數據中心

收藏 評論

u_16099296 頭像

mob6454cc73e9a6 - 基於Hadoop的數據倉庫工具Hive(附超實用示例) - 個人文章

技術介紹 大數據技術：hadoop、hive、sqoop 後端技術：springboot、mybatis 前端技術：vue、elementui、echarts 開發環境：java17、node.js、mysql、maven、idea 項目介紹 優衣庫訂單數據分析項目基於大數據技術開發，旨在通過對電商平台的訂單數據進行高

大數據 , hadoop , 數據庫 , 分佈式 , Python

收藏 評論

tech 頭像

青雲交技術圈 - Java 大視界 -- Java 大數據在智能體育賽事運動員體能監測與訓練計劃調整中的應用

(centerJava 大視界 -- Java 大數據在智能體育賽事運動員體能監測與訓練計劃調整中的應用/center) 引言 嘿，親愛的 Java 和 大數據愛好者們，大家好！我是CSDN（全區域）四榜榜首青雲交！當體育競技的號角愈發激昂，運動員每一次成績突破的背後，都藏着體能科學與訓練智慧的較量。傳統的體能監測和訓練模式，如同用舊地圖探索新大陸，數據零散、分析滯後，早已無法滿

spark , Java 大數據 , 大數據 , yyds乾貨盤點 , 數據 , 訓練計劃 , JAVA , 智能體育

收藏 評論

u_16213701 頭像

mob64ca14147fe3 - 驥遠自動化PROFINET轉Modbus網關與儀表通訊

協議轉換網關打通Prof inet轉Modbus TCP鴻溝，實現高速隧道智慧監控 一、項目背景 2025 年，華東某中心城市新建 12km 城市快速路隧道，設計時速 80 km，雙洞 6 車道，日均通行能力 8 萬輛。隧道機電系統採用“三級管理、兩級控制”架構 由於業主已招標選用研華IPC-610H 工控機（i7-13700E

大數據 , tcp , 運維 , hadoop , 協議轉換

收藏 評論

zhaoqianglaoshi 頭像

趙渝強老師 - 【趙渝強老師】阿里雲大數據存儲計算服務：MaxCompute

阿里雲大數據計算服務（MaxCompute）是一種快速、完全託管的TB/PB級數據倉庫解決方案。MaxCompute向用户提供了完善的數據導入方案以及多種經典的分佈式計算模型，能夠更快速的解決用户海量數據計算問題，有效降低企業成本，並保障數據安全。 視頻講解如下： https://www.bilibili.com/video/BV19M8izmEoU/?aid=114924365812...

spark , 大數據 , hadoop , 阿里雲

收藏 評論

u_16213595 頭像

mob64ca13fb1f2e - yarn resolutions 通配符使用

任意單個字符： “？”可以代表任意單個字符，輸入幾個“?”就代表幾個未知字符。如：輸入“? 條”就可以找到諸如“一條”、“二條”、“三條”等字符；輸入“???條”可以找到“一二三條”等字符。 任意多個字符： “*”可以代表任意多個字符。如：輸入“*國”就可以找到“中國”、“美國”、“孟加拉國”

word , 查找字符 , 大數據 , yarn , 字符串 , 程序人生

收藏 評論

u_16099336 頭像

浪人小風光 - 大數據Hadoop技術的發展歷史與未來前景_hadoop的未來發展方向

2025 年排名前 15 位的大素材技巧，它們具備不同的架構、性能特性與應用場景，可滿足各類組織的多樣化需求。下文將深入介紹這些領先的大數據工具與框架。就是大信息科技不斷髮展，以應對日益增長的數據量、數據速度與內容多樣性等挑戰。以下 Apache Hadoop。Apache Hadoop 是大數據領域的基礎性框架，可提供可靠、可擴展的分佈式計算環境，非常適

大數據 , 數據 , hadoop , 應用場景 , apache

收藏 評論

u_16163480 頭像

bugyinyin - 【AI大模型應用場景】AI Agent與工程系統融合實踐：兩大業務場景落地全解析！

簡介 文章分享了將AI Agent技術應用於"智能播報助手"和"批量建任務"兩個業務場景的實踐歷程，闡述了AI Agent與傳統工程系統深度融合而非完全替代的有效路徑。通過MCP協議擴展Agent能力邊界，實現報表自動監控和釘釘消息推送；在批量建任務場景中，探索了Agent與工程結合的最佳實踐，強調應準確理解技術邊界和長處，構建高效穩健的解決方案。

大數據 , 人工智能 , transformer , prompt , 大模型學習 , 前端開發 , Javascript

收藏 評論

u_16099358 頭像

月光傾城美 - stormsniffer正則表達式

　　處理海量日誌對每一個運維來説都非常的頭疼，日誌分析我們首先需要把需要的數據從海量的日誌中匹配出來，降低數據量，然後在分析這些日誌。那麼從海量的日誌中把我們需要的日誌找出來就需要我們寫一個公式來匹配，那麼如何才能寫一個這樣的公式呢？ 正則表達式其實就是通過給定的符號生成一個字符串匹配的公式，通過該公式把需要的數據匹配出來。 比如 匹配

Storm , 大數據 , 錨定 , stormsniffer正則表達式 , 正則表達式 , Git

收藏 評論

u_15474939 頭像

海豚調度平台 - 圖解 Apache DolphinScheduler 如何配置飛書告警

飛書創建羣，並添加自定義機器人 記住這個【Webhook】後面配置【海豚告警】的時候會用到。 配置告警 在【安全中心】中，選擇【告警實例管理】中的【創建告警實例】。 在【選擇插件】中，選擇【Feishu】，將前面的【Webhook】填進【Web鈎子】。 然後，在【安全中心】的【告

spark , 大數據 , 自定義 , 推送 , Web

收藏 評論