tag 大數據

標籤
貢獻385
303
05:15 PM · Oct 25 ,2025
tech 頭像 elhix0bg 頭像 nebulabio 頭像 u_16272508 頭像 u_15844731 頭像 u_14767244 頭像 dolphinscheduler 頭像 ververica 頭像 seatunnel 頭像 zhaoqianglaoshi 頭像 huikaichedemianbao 頭像 u_17602582 頭像

@大數據 / 博客 RSS 訂閱

u_13544 頭像

deanyuancn - MapReduce 實驗：二次排序

1.首先創建twosortfile1.txt,並在此文件中輸入內容 cd /usr/local/hadoop vim twosortfile1.txt twosortfile1.txt文件內容如下: a 20 b 20 a 5 c 10 c 8 b 15 a 10 b 18 c 29 b 52

大數據 , hadoop , text , mapreduce , apache

收藏 評論

tech 頭像

青雲交技術圈 - Java 大視界 -- 基於 Java 的大數據聯邦學習在跨行業數據協同創新中的實踐突破

(centerJava 大視界 -- 基於 Java 的大數據聯邦學習在跨行業數據協同創新中的實踐突破/center) 引言： 嘿，親愛的 Java 和 大數據愛好者們，大家好！我是CSDN（全區域）四榜榜首青雲交！今天，我們將迎接新的挑戰 —— 破解跨行業數據協同的世紀難題，探索基於 Java 的大數據聯邦學習如何打破數據孤島，點燃數據協同創新的燎原之火！ 在數字化浪潮席捲

spark , Java 大數據 , 大數據 , yyds乾貨盤點 , 聯邦學習 , JAVA , 數據孤島

收藏 評論

u_17602582 頭像

mb69410ac31213c - 5大核心優勢！華為雲Flexus AI智能體解決AI應用的“最後一公里”

在當今AI技術飛速發展的時代，企業面臨的挑戰從是否要採用AI，轉變為如何高效地應用AI。根據Gartner的數據，2025年全球AI支出預計將達到近1.5萬億美元，企業對於AI技術的需求呈現爆炸式增長。 對廣大企業而言，面對洶涌而來的AI浪潮，急需一款配置靈活、安全可控且兼具性能和穩定的智能體工具。華為雲Flexus AI智能體作為一站式AI應用平台，支持工作流編排、智能體

大數據 , 數據 , 數據倉庫 , 官網 , 調優

收藏 評論

u_16099237 頭像

編程夢想實現家 - solr通過api刪除索引

一、字段配置（schema） schema.xml位於solr/conf/目錄下，類似於數據表配置文件， 定義了加入索引的數據的數據類型，主要包括type、fields和其他的一些缺省設置。 1、先來看下type節點，這裏面定義FieldType子節點，包括name,class,positionI

字段 , 大數據 , solr , 數據倉庫 , solr通過api刪除索引 , JAVA

收藏 評論

u_12218 頭像

棉花糖 - aix系統查看db2的地址

prtconf 查看機器基本配置 vmstat查看機器運行情況 pwd 查看當前路徑 errpt 查看出錯信息 調用使用過的歷史命令 先輸入 set -o vi (只需輸入一次)以後只要 先按Esc鍵再按k鍵就可以調出歷史命令，連續按k則連續調出歷

大數據 , calendar , 數據倉庫 , aix , server , JAVA , aix系統查看db2的地址

收藏 評論

u_16163480 頭像

bugyinyin - AI Agent深度解析：智能系統的原理與應用，未來發展的機遇與挑戰！

寫在前面的話： AI Agent本質就是大模型調用工具的能力，前段時間爆火的Manus其實就是它的應用。 打個比方，如果你要做個攻略，你把時間安排告訴大模型，比如：準備7月26號坐火車去西安，準備玩一個星期，想去著名景點玩，吃些當地好吃的。那麼大模型就會跟你對話，把完整攻略做好。而只有攻略其實還不夠，因為定車票、住酒店、查地圖這些操作還要自己

大模型教程 , 大數據 , chatgpt , 人工智能 , 深度學習 , 前端開發 , Javascript

收藏 評論

u_16272508 頭像

事辯天下 - 星期零榮獲第十四屆中國食品健康七星獎“年度新秀獎”

11月27日，第十四屆中國食品健康七星獎頒獎典禮在上海隆重舉辦。星期零憑藉在植物基食品領域的持續創新、高標準的食品安全體系建設以及可持續實踐等方面的出色表現，首次參選便榮獲“年度新秀獎”，展現了食品行業新興創新力量的活力和潛力。 作為中國食品安全和大眾健康領域的積極倡導者和有力推動者，七星聯盟發揮政府、企業、協會以及媒體等多方力量，推動中國食品行業的全面發展。自成立

鏈路 , 大數據 , 數據倉庫 , 安全管理

收藏 評論

u_15844731 頭像

阿森CTO - C++面向對象---多態

@TOC 多態是C++面向對象三大特性之一，核心價值在於為不同數據類型的對象提供統一接口，讓不同對象執行同一行為時呈現差異化效果，極大提升了代碼的靈活性和可擴展性。 一、多態的核心概念 簡單來説，多態就是“同一行為，不同表現”。生活中最典型的例子就是買票場景：普通人購票需支付全價，學生可享受半價優惠，軍人則擁有優先購票的特權。在編程中，這意味着通過統一的

虛表 , 大數據 , yyds乾貨盤點 , 虛函數 , 數據倉庫 , 派生類

收藏 評論

goody 頭像

goody - sql left join 關聯查詢為什麼不走索引

文章一： 1.用hql語句 ` String hql="select student.id, student.name ,class.name from student映射實體類名 as student , class映射實體類名 as class where class.id = student.classid ";

字段 , 大數據 , 數據倉庫 , JAVA , 多表查詢

收藏 評論

u_16099209 頭像

雲端夢想家 - hadoop flink 後台命令 查看歷史任務

大家好，我是獨孤風。今天為大家推薦的是一個完全開源的項目StreamX。該項目的發起者Ben也是我的好朋友。 ****什麼是StreamX，StreamX 是Flink Spark極速開發腳手架，流批一體一站式大數據平台。 自2021年3月開源以來，貢獻者已累計發展到10多位。 隨着FlinkSpark生態的不斷完善，越來越多的企業選擇這兩款組件，或者其中之

大數據 , jar , hadoop , 開源項目

收藏 評論

u_16213723 頭像

mob64ca1419e0cc - Spark問題定位並且解決

文章目錄 RDD簡介 RDD常用的算子 通過並行化scala集合創建RDD union求並集 intersection求交集 join(連接) groupByKey cogroup cartesian笛卡爾積 WordCount

spark , List , d3 , 大數據 , 數據 , Spark問題定位並且解決

收藏 評論

u_16213608 頭像

mob64ca13fe62db - Java基礎之第一章概述

Java開發者需要修煉的五大核心“外功基礎”： 一、 開發工具鏈 - 你的“兵器譜” 集成開發環境（IDE）： IntelliJ IDEA（主流首選）： 精通其快捷鍵、代碼模板、重構技巧、調試器、數據庫工具、與各種框架的集成。 Eclipse： 在某些傳統企業仍有使用，需瞭解。 構建與依賴管理：

spark , 大數據 , API , JAVA , Web

收藏 評論

u_17602582 頭像

mb69410ac31213c - 華為雲Flexus AI智能體“0門檻”免費體驗，五大特性掀起AI轉型潮

在人工智能技術飛速發展的當下，如何將技術轉化為實際生產力，是擺在絕大多數企業面前的難題。為了解決AI“最後一公里”的問題，近日，華為雲正式推出Flexus AI智能體，以20+款Agent，貼近客户業務，帶來“0門檻”的免費體驗。 作為一款“0門檻”AI體驗平台，華為雲Flexus AI智能體無需配置，點擊即用，而且還具備靈活配置、極致效率、安全可控、性能碾壓、深度賦能等諸

大數據 , 搜索 , 數據倉庫 , 人工智能

收藏 評論

zhaoqianglaoshi 頭像

趙渝強老師 - 【趙渝強老師】史上最詳細：Hadoop HDFS的體系架構

在Hadoop HDFS的體系架構中，包含了三個組成部分。它們分別是：NameNode、DataNode和SecondaryNameNode。下圖摘至Hadoop官方的網站，它説明了HDFS的體系架構。 視頻講解如下： https://www.bilibili.com/video/BV1eh23Y5En9/?aid=113282883000... 一、NameNode的職責 Name

hdfs , 大數據 , hadoop

收藏 評論

u_12218 頭像

棉花糖 - list或者當前索引

1.General 設置默認文件管理器(如tc,路徑，引號不能省去) 2.Keywords 2.1Web 不帶參數:比如輸入lol跳轉到官網 帶參數：比如淘寶查詢 2.2Folder 關鍵字打開文件夾 比如打開我的下載文件夾 2.3Commands

大數據 , 搜索 , list或者當前索引 , 數據倉庫 , 應用程序 , 自定義

收藏 評論

u_16099254 頭像

歲月靜好呀 - hadoop一致性模型

一致性hash算法是什麼？ 一致性hash算法，是麻省理工學院1997年提出的一種算法，目前主要應用於分佈式緩存當中。 一致性hash算法可以有效地解決分佈式存儲結構下動態增加和刪除節點所帶來的問題。 在Memcached、Key-Value Store、Bittorrent DHT、LVS中都採用了一致性hash算法，可以説一致性has

大數據 , 一致性hash , hadoop , 緩存 , hadoop一致性模型 , 順時針

收藏 評論

u_14444 頭像

lgmyxbjfu - html中一個元素在元素數組中的索引

HTML（HyperText Markup Language），用來向瀏覽器標示文檔的所有“內容”與“結構”。 抱着温故而知新的態度，在這裏通過“回到HTML”系列文章，重新梳理一下HTML的相關知識。 1.HTML分類 對於HTML元素有以下幾種分類方法： （1）元素類型： 1 普通元素： h1元素,p元素... 2void元素：br /元素

塊級元素 , html中一個元素在元素數組中的索引 , 大數據 , 數據倉庫 , 嵌套 , HTML

收藏 評論

u_16213681 頭像

16213681 - 前端學習筆記：let、const、var的區別

在 JavaScript 中，var、let 和 const 都可以用來聲明變量，但它們在作用域、提升行為和可變性等方面存在顯著差異。 一、var 在ES6之前，var是我們聲明變量的唯一選擇 1.1 作用域 函數作用域：使用var聲明的變量，其作用域是其所在的函數。如果在函數外聲明，則是全局作

作用域 , 大數據 , 初始化 , 賦值 , hadoop , 前端

收藏 評論

vivo_tech 頭像

vivo互聯網技術 - 深度剖析 StarRocks 讀取 ORC 加密文件背後的技術

作者：vivo 互聯網大數據團隊 - Zheng Xiaofeng 本文介紹了StarRocks數據庫如何讀取ORC加密文件，包括基礎概念以及具體實現方案。深入探討了利用ORC文件的四層結構和三層索引機制，實現高效查詢加密數據。希望通過本文對ORC加密文件讀取功能的實現細節的剖析，讓讀者更加深刻理解ORC文件，同時瞭解StarRocks支持加解密數據分析的方案。 一、背景 為了提升對敏感數據的

大數據 , 加密解密 , 數據庫

收藏 評論

u_14273 頭像

charlesc - win10啓動Hive

Windows上的快速啓動器Wox 在日常的電腦使用操作中，我們常常需要花很多時間去做同一件事情，比如啓動軟件的操作：點擊開始菜單》搜索 Windows》搜索所要打開的應用》點擊啓動。 為了方便我們快速的啓動軟件，我們通常還會把最常用的軟件圖標放到任務欄當中，你或許以為這就是啓動軟件的極限操作了。但是，我今天

快捷鍵 , github , 大數據 , win10啓動Hive , 搜索 , hive

收藏 評論

u_16213572 頭像

技術領航探索者 - Spring Cloud Alibaba系列之Nacos分佈式配置中心 - Nicky的個人空間 -

作者：如漫、席翁 AI Agent的構建模式正在從“單個智能體做所有事”走向“多個專精智能體協作”，以更好地拆解並解決複雜任務、更精準的選取和使用工具。A2A（Agent-to-Agent）協議作為統一的通信層，旨在為跨進程、跨語言的智能體互操作提供標準化語義與傳輸通道，從而解決智能體數量增加引起的運維、管理和部署成本過高等問題。 為了讓開發

大數據 , nacos , hadoop , 人工智能 , 分佈式 , SAA , Multi Agent

收藏 評論

lu952450497 頭像

lu952450497 - 數倉開發——數據倉庫基礎概念與核心價值

數據倉庫是企業數據戰略的核心組成部分，面向主題的、集成的、相對穩定的、反映歷史變化的數據集合，用於支持管理決策。 面向主題：面向主題意味着數據按業務領域（如客户、產品）組織而非按業務系統 集成：集成性指數據經過標準化處理消除源系統間的不一致 相對穩定：非易失性表示數據一旦進入倉庫一般不直接修改 時變性：強調數據會記錄時間維度變化 與操作型數據庫（OLTP）相比，數據倉庫（

數據集 , 大數據 , 數據 , 數據倉庫

收藏 評論

ruanjiankaifa_xiaofanya 頭像

軟件部長 - Java源碼規則引擎：jvs-rules 8月新增功能介紹

JVS-rules是JAVA語言下開發的規則引擎，是jvs企業級數字化解決方案中的重要配置化工具，核心解決業務判斷的配置化，常見的使用場景：金融信貸風控判斷、商品優惠折扣計算、對員工考核評分等各種變化的規則判斷情景。 8月是收穫的季節，jvs-rules在這個季節到來之時做了大量的操作優化與功能迭代，現簡要介紹如下： 更新內容 1、優化規則的交互操作，針對比較複雜的規則情況下，讓配置結果更加

風險控制 , 大數據 , 低代碼 , 變量賦值 , 變量

收藏 評論

u_12207 頭像

衞斯理 - 高可用hadoop yarn 8088如何修改

HA 即 （high available）高可用，又被叫做雙機熱備，用於關鍵性業務。 簡單理解就是，有兩台機器A和B，正常是A提供服務，B待命閒置，當A宕機或服務宕掉，會切換至B機器繼續提供服務。常用實現高可用的開源軟件有heartbeat和keepalived，其中keepalived有負載均衡的功能。 ignore_js_op

服務器 , 大數據 , 運維 , hadoop , Nginx , 高可用

收藏 評論