tag elasticsearch

標籤
貢獻63
136
03:01 PM · Oct 26 ,2025

@elasticsearch / 博客 RSS 訂閱

阿里雲大數據AI技術 - 一行代碼,讓Elasticsearch 集羣瞬間雪崩——5000W 數據壓測下的性能避坑全攻略

作為一名長期與Elasticsearch打交道的引擎研發,我見過太多集羣因為一個看似無害的wildcard模糊查詢而瞬間崩潰。 許多開發者繼承了SQLLIKE %...%的思維習慣,直接把它搬到ES中——在小數據量時沒什麼大礙,但當文檔量上億時,它會變成拖垮集羣的性能黑洞: 輕則:錯用字段類型,查不準結果,浪費存儲 重則:暴力掃描,CPU瞬間打滿,集

elasticsearch , 阿里雲 , 人工智能 , 數據分析

收藏 評論

mob64ca13fe9c58 - docker實驗教師總結

Docker 安裝nginx #1、搜索nginx 鏡像,建議大家去docker 搜索,可以看到幫助文檔 docker search nginx #2、下載nginx 鏡像 docker pull nginx #3、安裝運行容器,將容器命名為nginx01 3344 是宿主機端口 80是容器端口,宿主機阿里雲需要開啓端口 docker

elasticsearch , MySQL , 雲計算 , docker實驗教師總結 , Docker

收藏 評論

夜行者3號 - flink-cdc實時增量同步mysql數據到elasticsearch_51CTO博客

一、整體架構與 Demo 思路 本 Demo 裏會啓動 4 個容器: observer:OceanBase CE 單機 mini 集羣; oblogproxy:OceanBase 日誌代理,用於提供日誌流; elasticsearch:7.6.0 版本,用來存儲 Flink 下游數據; kibana:可視化

elasticsearch , 數據 , oceanbase , flink , Css , Docker , 前端開發 , HTML

收藏 評論

SelectDB技術團隊 - 金融場景 PB 級大規模日誌平台:中信銀行信用卡中心從 Elasticsearch 到 Apache Doris 的先進實踐

導讀:中信銀行信用卡中心每日新增日誌數據 140 億條(80TB),全量歸檔日誌量超 40PB,早期基於 Elasticsearch 構建的日誌雲平台,面臨存儲成本高、實時寫入性能差、文本檢索慢以及日誌分析能力不足等問題。因此使用 Apache Doris 替換 Elasticsearch,實現資源投入降低 50%、查詢速度提升 2~4 倍,同時顯著提高了運維效率。 本文轉錄自陳地長(中信信用卡中

elasticsearch , 日誌分析 , 大數據 , 金融 , 數據庫

收藏 評論

南城 - 從日誌到檢索的一站式方案——採集、清洗、入庫與可視化的組件協同關係圖

寫在前面,本人目前處於求職中,如有合適內推崗位,請加:lpshiyue 感謝。同時還望大家一鍵三連,賺點奶粉錢。 構建高效的日誌系統不是簡單堆砌組件,而是讓數據流在採集、緩衝、處理、存儲和可視化各環節無縫協同的藝術 在深入掌握Elasticsearch的分片、副本與聚合性能調優後,我們面臨一個更宏觀的挑戰:如何將這些單點技術整合成完整的日誌處理體系。本文將透過組件協同關係圖的視角,揭示從日誌產生到

elasticsearch

收藏 評論

BugShare - 嘿嘿,一個簡單ElasticSearch小實現

週五臨近下班,原本打算摸摸魚,結果產品經理來個新需求。領導覺得 AI 服務器報價太貴,想先做個“低成本替代方案”來演示一下分析效果。於是,需求會議就開了。其中有一塊功能是 “檢索內容高亮顯示並展示匹配度”,產品經理説這可以考慮用 Elasticsearch 實現。行吧,需求是他提的,代碼自然就得咱來寫了。那就開幹吧 💪 一、啓動 Elasticsearch 服務(Docker 簡單搞定) 這裏用

vue.js , elasticsearch , 大數據 , springboot , Docker

收藏 評論

臻大蝦 - 全文檢索elasticsearch入門,看這篇就夠了

一、elasticsearch介紹 1、背景 在訂單管理系統中,訂單查詢的調用量都非常大,如果直接查詢數據庫,那數據庫的壓力可想而知,而且有時需要執行一些複雜的查詢,sql 並不能夠友好的支持,需要查詢很多張表。再比如用户手誤輸入的關鍵詞錯了或存在錯別字,那使用 sql 是無法搜索到。所以打算使用 Elasticsearch 來承載訂單查詢的主要壓力。 總的來説,使用 elasticsearch

elasticsearch , es7 , 全文檢索 , JAVA , elasticsearch入門教程

收藏 評論

anson12315 - [K8s技能系列] 監控和日誌管理實戰:構建K8s集羣可觀測性的完整解決方案

概念解析 Kubernetes監控和日誌管理是保障集羣穩定運行和應用健康的關鍵組成部分。監控關注系統的性能指標和健康狀態,而日誌管理則關注應用和系統的詳細行為記錄。 監控概念 指標監控:收集和分析系統性能指標,如CPU、內存、網絡、磁盤使用率 健康檢查:監控應用和服務的可用性和響應狀態 告警機制:在檢測到異常時觸發通知和自動響應 可視化展示:通過圖表

grafana , elasticsearch , K8s , kubernetes , yyds乾貨盤點 , 雲計算

收藏 評論

不語 - ElasticSearch通過JavaAPI無法查詢到中文字段的原因及解決

ElasticSearch通過JavaAPI無法查詢到中文字段的原因: 中文被標準分詞器分詞了,自然就查詢不到一個完整的字段名 解決: 在查詢方法中的name參數後加上 .keyword 告訴程序這是一個完整的詞,不可拆分 給個大特寫

elasticsearch , es7 , API , JAVA , 程序員

收藏 評論

SelectDB技術團隊 - 查詢提速 11 倍、資源節省 70%,Apache Doris 在網易日誌和時序場景的實踐

作者|隱形(邢穎), 網易資深數據庫內核工程師 編輯整理|SelectDB 技術團隊 導讀:作為網易重要的業務線,靈犀辦公和雲信針對大規模日誌/時序數據處理和分析的挑戰,分別構建了靈犀 Eagle 監控平台和雲信數據平台。本文將重點介紹 Apache Doris 在網易日誌和時序場景中的應用,如何使用 Apache Doris 替換 Elasticsearch 和 InfluxDB,從而實現更低的

elasticsearch , 日誌分析 , 大數據 , 時序數據庫 , 數據庫

收藏 評論

阿里雲大數據AI - 阿里雲 AI 搜索方案解讀:大模型驅動下的智能搜索,助力企業數字化轉型

在過去的一年裏面,隨着大模型的技術突飛猛進,大模型的能力日益增強。這些都驅動着我們的搜索技術快速的演進到了下一代,也就是 AI 搜索的技術。大模型的快速發展不僅重塑了搜索技術的基礎,也為各行各業的數字化轉型提供了強有力的支持。 一、AI 搜索技術的特點 AI 搜索技術具有以下幾個顯著的特點: 重構:一個是 AI 搜索技術方面的重構。AI 搜索技術目前正在基於大模型進行全面重構,通過大模型,搜索

elasticsearch , 搜索 , 阿里雲 , 人工智能

收藏 評論

笑傲江湖求敗 - jest 文件在vscode 裏面怎運行

一、説明   1、elasticsearch版本:6.2.4 。     jdk版本:1.8(該升級趕緊升級吧,現在很多技術都是最低要求1.8)。     jest版本:5.3.3。   2、一些不錯的文章 二、前提:       1、最好已經大概看過es的官方文檔,附上文檔地址:       2、知道自己需要的es命令:

elasticsearch , System , maven , 架構 , 後端開發

收藏 評論

vivo互聯網技術 - 線上ES集羣參數配置引起的業務異常案例分析

作者:vivo 互聯網數據庫團隊- Liu Huang 本文介紹了一次排查Elasticsearch node_concurrent_recoveries 引發的性能問題的過程。 一、故障描述 1.1 故障現象 1. 業務反饋 業務部分讀請求拋出請求超時的錯誤。 2. 故障定位信息獲取 故障開始時間 19:30左右開始 故障拋出異常日誌 錯誤日誌拋出timeout錯誤。 故障之前的

elasticsearch , 性能

收藏 評論

藍易雲 - 將Docker命令轉化Docker Compose文件

要將Docker命令轉換為Docker Compose文件,關鍵在於理解Docker命令的各個參數,然後將其映射到Docker Compose的YAML配置文件中。以下是對這一過程的詳細分析和具體步驟。 一、Docker Compose簡介 Docker Compose是一個用於定義和管理多容器Docker應用程序的工具。通過Compose,開發者可以使用YAML文件來配置應用程序的各個服務。Co

elasticsearch , MySQL , mariadb , postgresql , memcached

收藏 評論

藍易雲 - ubuntu擴展內存掛載

在 Ubuntu 系統中,創建並掛載交換分區(Swap)是擴展內存的有效方式。交換分區通過使用硬盤空間來替代物理內存,當 RAM 使用完時,系統會自動切換到交換分區來繼續存儲數據。以下是創建和掛載交換分區的詳細步驟與解釋。 一、檢查可用磁盤空間 在開始創建交換分區之前,需要確保系統中有足夠的磁盤空間。使用 df -h 命令可以查看硬盤的使用情況: df -h 解釋: df -h:該命令以人類可

elasticsearch , xml , sqlite , memcached , SQL

收藏 評論

藍易雲 - Ubuntu22.04如何調試ROS2_humble的源代碼

從源碼編譯和調試 ROS2 Humble 的詳細指南 在機器人操作系統 ROS2 中,深入理解其源碼並進行調試對開發者來説至關重要。本文將詳細介紹如何在本地環境中編譯和調試 ROS2 Humble 源碼,幫助您更有效地開發和優化機器人應用。 一、環境準備 1. 確保已安裝 ROS2 Humble 首先,確認您的系統已正確安裝 ROS2 Humble。可以通過以下命令驗證: ros2 --vers

elasticsearch , MySQL , mariadb , postgresql , memcached

收藏 評論

藍易雲 - Python中的display函數from IPython.display import display

深入探討Python中的display函數:功能與應用 Python是一種廣泛應用的高級編程語言,尤其在數據科學、機器學習和Web開發等領域中,因其簡潔、強大而深受歡迎。在這個領域中,IPython 作為增強的交互式Python解釋器,提供了強大的媒體顯示功能。今天我們將詳細探討來自IPython.display模塊中的特殊函數——display。 一、什麼是IPython? IPython 是P

elasticsearch , redis , mongodb , xml , memcached

收藏 評論

鳩摩智首席音效師 - 如何在 CentOS / RHEL上安裝 Elasticsearch ?

Elasticsearch是一個強大的開源搜索和分析引擎,它允許您存儲、搜索和分析大量數據。在本文中,我們將展示如何在 CentOS / RHEL 9上安裝 Elasticsearch 的全過程。 Step 1: Update Your System 打開終端,更新系統包索引 sudo dnf update Step 2: Installing Java Elasticsearch 是使用 Ja

rhel , elasticsearch , Centos

收藏 評論

極限實驗室 - 極限科技三週年慶典:追求極致,共創未來科技新篇章

2024 年 12 月 3 日,一場盛大的慶典活動在香港 IFS 集團旗下長沙瑪珂酒店璀璨啓幕,極限科技迎來了其三週年的輝煌慶典。此次慶典不僅是對極限科技過往成就的回顧與慶祝,更是對未來科技夢想的展望並開始新的啓航。 慶典現場,極限科技的全體員工、尊貴的合作伙伴以及長期以來給予我們堅定支持的客户歡聚一堂,共同見證了這一重要時刻。 活動伊始,極限科技的創始人曾勇回顧了公司創立至今的點點滴滴,他提

elasticsearch , 搜索引擎 , 科技 , 網關

收藏 評論

weirdo_67190d70053aa - ElasticSearch-8.7.1集羣部署

單機部署 解壓文件 tar -zxvf elasticsearch-8.7.1-linux-x86_64.tar.gz mv elasticsearch-8.7.1 /usr/local/share/ 創建用户組 groupadd elastic 創建ES啓動用户 es不能以root用户啓動,單獨新建一個普通用户 useradd el

elasticsearch , 中間件

收藏 評論

qbit - 獲取 Elasticsearch 的 token_count 類型的值(qbit)

前言 本文對 Elasticsearch 7.17 適用,官方文檔 Token count field type 測試 新建 mapping PUT my_index { "mappings": { "properties": { "name": { "type": "keyword", "doc_values": true,

elasticsearch , token

收藏 評論

極限實驗室 - Easysearch 可搜索快照功能,看這篇就夠了

可搜索快照功能改變了我們對備份數據的查詢方式。以往要查詢備份數據時,要先找到備份數據所在的快照,然後在一個合適的環境中恢復快照,最後再發起請求查詢數據。這個處理路徑很長,而且很消耗時間。可搜索快照功能將大大簡化該處理路徑,節約時間。 角色設置 相信你對節點角色的概念已經有所熟悉。要啓用可搜索快照功能,Easysearch 集羣中必須至少有一個節點擁有 search 角色。參考設置如下。 node.

elasticsearch , 搜索引擎 , 數據庫

收藏 評論

極限實驗室 - 如何使用 DataX 連接 Easysearch

DataX DataX 是阿里開源的一款離線數據同步工具,致力於實現包括關係型數據庫(MySQL、Oracle 等)、HDFS、Hive、ODPS、HBase、FTP 等各種異構數據源之間穩定高效的數據同步功能。 本篇主要介紹 DataX 如何將數據寫入到 Easysearch,對於各種數據源的連接不會做深入的探討,感興趣的小夥伴可以訪問 DataX 的 Github 倉庫查看詳情。 下載與安裝

elasticsearch , 搜索引擎 , 數據庫 , 程序員

收藏 評論

會飛的鳥 - PHP怎樣在幾秒鐘內安裝一個全文檢索引擎?

安裝導入WindSearch 環境要求: UTF-8編碼 PHP ≥7.3 mbstring Extension PDO Extension SQLite Extension 開始安裝: 在github上將WindSearch下載到本地你喜歡的文件夾,這是一個純PHP的全文檢索引擎 地址:https://github.com/rock365/windsearch(點個star吧

elasticsearch , 搜索引擎 , php , 全文檢索 , 站內搜索

收藏 評論