tag 日誌分析

標籤
貢獻17
88
05:54 PM · Oct 25 ,2025
zhuyundataflux 頭像 selectdb 頭像 swiftcommunity 頭像 zxc7563598 頭像 anjingdexiaoyanyao_ciaxxr 頭像 kindlingx 頭像 meituanjishutuandui 頭像 yqyx36 頭像 philadelphia 頭像 reliefe 頭像 servicedeskplus 頭像 mengxiang_592395ab95632 頭像

@日誌分析 / 博客 RSS 訂閱

kindlingx 頭像

雲觀秋毫 - APO v0.9.0 更新：告警分析功能免費公測；全量日誌性能優化；多項問題修復

APO v0.9.0 更新發布！本次更新主要包含以下內容： 告警分析功能免費公測 告警分析功能是 APO 的企業版功能，現向所有用户免費公測。 該功能通過自動分類告警和關聯分析數據，將告警與應用和業務入口精準關聯。通過深入分析業務入口的告警，用户可以檢查告警事件與服務之間的關係。“告警回溯”利用拓撲結構對告警事件進行邏輯回放，幫助用户定位故障節點。最終通過檢查故障節點的延時報告和錯誤報告瞭解節點當

日誌分析 , 告警

收藏 評論

anjingdexiaoyanyao_ciaxxr 頭像

xcmd - x-cmd install | Toolong - 終端日誌分析的瑞士軍刀

還在為繁雜的日誌文件抓耳撓腮？還在 SSH 會話裏用着原始的 tail、less 和 grep 組合？是時候升級你的日誌分析工具了！Toolong，一款強大的終端日誌查看器，讓你告別低效，擁抱高效！ Toolong 是一款專為開發者打造的終端應用，旨在簡化和加速日誌文件的查看、分析和搜索。它不僅僅是一個簡單的日誌查看器，更是一個集成了多種實用功能的瑞士軍刀。 核心功能，一應俱全 實時追蹤 (

日誌分析 , 系統管理 , Python

收藏 評論

selectdb 頭像

SelectDB技術團隊 - 查詢性能提升 10 倍、存儲空間節省 65%，Apache Doris 半結構化數據分析方案及典型場景

隨着業務的蓬勃發展，各企業對數據處理的靈活性和可擴展性提出了更高的要求。在此背景下，JSON、XML 等半結構化數據憑藉其較強的靈活性在眾多企業得到廣泛應用。然而，傳統關係型數據庫結構嚴格，難以應對半結構化數據的複雜性及多樣性。為有效存儲及分析這些數據，Apache Doris 針對不同應用場景提供了 Array、Map、Struct、JSON、VARIANT半結構化數據存儲分析解決方案。 本文我

elasticsearch , 日誌分析 , 日誌管理 , 數據結構 , Json

收藏 評論

u_16099215 頭像

技術領航員 - Git實操大全（最全操作）

你是否曾因GitBucket數據異常變更而無從追溯？作為團隊協作的核心代碼倉庫，GitBucket的數據庫安全直接關係到研發資產的完整性。本文將帶你通過pgAudit插件實現PostgreSQL數據庫的全操作審計，從環境配置到日誌分析，5分鐘搭建起可視化監控體系，讓每一次數據變更都有跡可循。 審計前的準備工作 在開始配置前，請確保你的GitBucket環境已滿

日誌分析 , 後端開發 , postgresql , harmonyos , Git

收藏 評論

qian5201314 頭像

代碼保安 - 用Go實現一個實時日誌分析工具

實現一個功能完整的實時日誌分析工具。這個工具可以實時監控日誌文件、分析日誌內容並提供統計信息。 package main import ( "bufio" "encoding/json" "fmt" "log" "os" "path/filepath" "regexp" "strings" "sync" "time" "github.com/fsnotify

Go語言 , 日誌文件 , 日誌分析 , 後端開發 , Json

收藏 評論

sihaihande 頭像

漢得數字平台 - 飛搭系列 | 全局日誌功能，讓每一次執行都清晰可見

前言 飛搭低代碼平台（FeiDa，以下簡稱“飛搭”），為企業提供在線化、靈活的業務應用構建工具，支持高低代碼融合，助力企業低門檻、高效率和低成本地快速應對市場變化，加速複雜業務場景落地。 概要介紹 在數字化深度推進的今天，企業依賴大量低代碼應用快速響應業務需求。然而，隨着應用複雜度提升和交互鏈路增長，“看不見、理不清”的系統執行過程正成為新的效率黑洞——流程是否正常執行？報錯如何快速

日誌分析 , 日誌管理 , 低代碼開發平台

收藏 評論

zhuyundataflux 頭像

觀測雲 - Kafka 業務日誌採集最佳實踐

簡介 Apache Kafka 是一個分佈式流處理平台，主要用於構建實時數據流管道和應用程序。在收集業務日誌的場景中，Kafka 可以作為一個消息中間件，用於接收、存儲和轉發大量的日誌數據。將 Kafka 與其他系統（如 Elasticsearch、Flume、Spark Streaming 等）集成，以提供更豐富的日誌處理和分析功能。本文提到的是和觀測雲集成，即通過觀測雲的採集器 Datakit

日誌分析 , kafka

收藏 評論

swiftcommunity 頭像

Swift社區 - 【AI日誌分析】基於機器學習的異常檢測：告別傳統規則的智能進階

摘要 隨着系統規模的擴大和複雜性增加，傳統基於規則的日誌分析方法難以識別隱藏的複雜異常模式。本文將介紹基於機器學習的日誌異常檢測技術，包括模型選擇、特徵工程及實現步驟。通過具體的代碼示例與圖表，展示如何高效檢測異常日誌，並提供應用場景與優化策略。 引言 日誌是系統運行狀態的關鍵數據來源，但面對海量日誌數據，傳統規則式分析顯得力不從心。機器學習能夠根據日誌的歷史數據和行為模式，通過訓練模型檢測異常情

機器學習 , 日誌分析 , 人工智能

收藏 評論

zhuyundataflux 頭像

觀測雲 - 網絡設備日誌接入觀測雲最佳實踐

簡介 Syslog 是一種工業標準的協議，用於記錄設備的日誌。它廣泛應用於 UNIX 系統、路由器、交換機等網絡設備中，用於記錄系統中發生的各種事件。管理者可以通過查看系統日誌來掌握系統狀況。UNIX 的系統日誌是通過 syslogd 進程記錄系統事件，也可以記錄應用程序的運作事件。通過適當的配置，還可以實現運行 Syslog 協議的機器間的通信，通過分析這些網絡行為日誌，追蹤和掌握設備和網絡的狀

日誌分析

收藏 評論

zxc7563598 頭像

蘇琢玉 - 基於責任鏈與策略模式的輕量級PHP日誌庫設計

你有沒有遇到過這樣的情況：代碼被各種人拷來拷去，散落在不同的服務器上，它們運行着同樣的代碼，卻各有各的脾氣。A 服務器風平浪靜，B 服務器炸成煙花，C 服務器似乎活着但又不太對勁……而你，每天都在面對來自四面八方的“XX功能炸了”“接口500了”“部署完直接寄了”的靈魂拷問。 最離譜的是，它們都會從你這同步最新的代碼，但到底是代碼問題還是服務器環境問題，你根本沒辦法第一時間知道。於是，問題就變成了

日誌分析 , php

收藏 評論

selectdb 頭像

SelectDB技術團隊 - 從 ClickHouse 到 Apache Doris：在網易雲音樂日增萬億日誌數據場景下的落地

導讀：日誌數據已成為企業洞察系統狀態、監控網絡安全及分析業務動態的寶貴資源。網易雲音樂引入 Apache Doris 作為日誌庫新方案，替換了 ClickHouse。解決了 ClickHouse 運維複雜、不支持倒排索引的問題。目前已經穩定運行 3 個季度，規模達到 50 台服務器， 倒排索引將全文檢索性能提升7倍，2PB 數據，每天新增日誌量超過萬億條，峯值寫入吞吐 6GB/s 。 網易雲音樂每

日誌分析 , 運維自動化 , 倒排索引 , 數據庫 , clickhouse

收藏 評論

selectdb 頭像

SelectDB技術團隊 - 金融場景 PB 級大規模日誌平台：中信銀行信用卡中心從 Elasticsearch 到 Apache Doris 的先進實踐

導讀：中信銀行信用卡中心每日新增日誌數據 140 億條（80TB），全量歸檔日誌量超 40PB，早期基於 Elasticsearch 構建的日誌雲平台，面臨存儲成本高、實時寫入性能差、文本檢索慢以及日誌分析能力不足等問題。因此使用 Apache Doris 替換 Elasticsearch，實現資源投入降低 50%、查詢速度提升 2～4 倍，同時顯著提高了運維效率。 本文轉錄自陳地長（中信信用卡中

elasticsearch , 日誌分析 , 大數據 , 金融 , 數據庫

收藏 評論

zhuyundataflux 頭像

觀測雲 - Promtail 對接日誌最佳實踐

Promtail 介紹 Promtail 是由 Grafana Labs 開發的日誌收集代理，主要用於從本地系統或容器中採集日誌，並將其發送到 Loki 或兼容 Loki 協議的系統，本次為對接到觀測雲。 觀測雲 觀測雲是一款專為 IT 工程師打造的全鏈路可觀測產品，它集成了基礎設施監控、應用程序性能監控和日誌管理，為整個技術棧提供實時可觀察性。這款產品能夠幫助工程師全面瞭解端到端的用户體驗追蹤，

日誌分析

收藏 評論

selectdb 頭像

SelectDB技術團隊 - 查詢提速 11 倍、資源節省 70%，Apache Doris 在網易日誌和時序場景的實踐

作者｜隱形（邢穎）， 網易資深數據庫內核工程師 編輯整理｜SelectDB 技術團隊 導讀：作為網易重要的業務線，靈犀辦公和雲信針對大規模日誌/時序數據處理和分析的挑戰，分別構建了靈犀 Eagle 監控平台和雲信數據平台。本文將重點介紹 Apache Doris 在網易日誌和時序場景中的應用，如何使用 Apache Doris 替換 Elasticsearch 和 InfluxDB，從而實現更低的

elasticsearch , 日誌分析 , 大數據 , 時序數據庫 , 數據庫

收藏 評論

mengxiang_592395ab95632 頭像

縱情向前的強仔 - 日誌問題精要：分析與總結

記錄應用系統日誌主要有三個原因：記錄操作軌跡、監控系統運行狀況、回溯系統故障。 記錄操作軌跡：可以數據化分析用户偏好，有助於優化系統業務邏輯，為用户提供個性化服務。如：通過access.log記錄用户的操作頻率和跳轉鏈接，有助於分析用户後續行為。監控系統運行狀況：全面有效的日誌系統有助於建立完善的應用監控體系。通過應用監控體系，可以實時監控系統運行狀況，及時預警，避免故障發送。系統運行狀況是指服務

日誌分析 , 日誌

收藏 評論

kindlingx 頭像

雲觀秋毫 - 告別ELK，APO提供基於ClickHouse開箱即用的高效日誌方案——APO 0.6.0發佈

ELK一直是日誌領域的主流產品，但是ElasticSearch的成本很高，查詢效果隨着數據量的增加越來越慢。業界已經有很多公司，比如滴滴、B站、Uber、Cloudflare都已經使用ClickHose作為ElasticSearch的替代品，都取得了不錯的效果，實現了降本增效，費用節約大多在50%以上。但是目前使用ClickHose作為日誌方案，存在以下問題。 主流的Vector+Cl

日誌分析 , 日誌 , go

收藏 評論

anjingdexiaoyanyao_ciaxxr 頭像

xcmd - 📥 x-cmd install | l'oGGo - 終端日誌的救星！快速過濾、輕鬆搜索、高效分析

在終端中查看大量的 JSON 格式日誌常常讓人頭疼，信息雜亂無章，難以快速定位關鍵信息。l'oGGo 正是為了解決這個問題而生的！它是一款基於 Golang 開發的終端用户界面 (TUI) 應用，能夠有效地解析和展示 JSON 日誌流，讓日誌分析變得輕鬆高效。 l'oGGo 的優勢 相比於傳統的終端日誌輸出，l'oGGo 提供了更加友好的交互式界面，讓您可以： 過濾/搜索日誌： 無需改

命令行 , 日誌分析 , 運維 , 數據分析 , Json

收藏 評論

meituanjishutuandui 頭像

美團技術團隊 - 如何優雅地記錄操作日誌？

操作日誌廣泛存在於各個B端和一些C端系統中，比如：客服可以根據工單的操作日誌快速知道哪些人對這個工單做了哪些操作，進而快速地定位問題。操作日誌和系統日誌不一樣，操作日誌必須要做到簡單易懂。所以如何讓操作日誌不和業務邏輯耦合，如何讓操作日誌的內容易於理解，讓操作日誌的接入更加簡單？上面這些都是本文要回答的問題，主要圍繞着如何“優雅”地記錄操作日誌展開描述。 1. 操作日誌的使用場景 系統日誌和操作

日誌分析 , 日誌管理 , 後台 , 美團

收藏 評論

u_16213413 頭像

mob64ca12ebf2cc - aigc 免費

在當前 IT 生態系統中，很多企業和開發者都在探索如何更好地運用人工智能生成內容（AIGC），同時又不試圖打破成本的界限。在面對“aigc 免費”的挑戰時，必須建立一個全面的技術框架，以保證數據安全性和可用性。以下是解決“aigc 免費”問題的記錄，涵蓋備份策略、恢復流程、災難場景、工具鏈集成、日誌分析和遷移方案等關鍵要素。 備份策略 為了有效地應對數據丟失和其他潛在問題，必須制

日誌分析 , 數據管理 , 數據恢復 , aigc

收藏 評論

zhuyundataflux 頭像

觀測雲 - 日誌聚類算法 Drain 的實踐與改良

在現實場景中，業務程序輸出的日誌往往規模龐大並且類型紛繁複雜。我們在查詢和查看這些日誌時，平鋪的日誌列表會讓我們目不暇接，難以快速聚焦找到重要的日誌條目。 在觀測雲中，我們在日誌頁面提供了聚類分析功能，可以快速聚合相似的日誌文本，幫助你全覽不同類型的日誌。這個功能背後就由基於 Drain 的改良算法驅動。 快速理解 Drain 算法 根據 logparser 項目提供的 Benchmark 數據

日誌分析 , 算法

收藏 評論

M82A1 頭像

滄州虎王科技 - 中興FB30刷機故障終極修復指南

針對中興FB30隨身WiFi刷機後的鎖頻、ADB、AT指令失效問題，以下是分步排查方案： 一、基礎檢查 固件兼容性 確認刷入的ufitool-SZXK固件是否匹配設備硬件版本（如查看PCB板絲印型號） 嘗試重刷固件（建議下載新版固件包並校驗MD5） 驅動與端口 設備管理器

軟件研發 , 日誌分析 , 固件 , 重啓

收藏 評論

zhuyundataflux 頭像

觀測雲 - Kubernetes CRD 方式配置容器日誌採集最佳實踐

一、概述 DataKit 通過 Kubernetes Custom Resource Definition (CRD) 提供了一種聲明式的容器日誌採集配置方式。用户可以通過創建 ClusterLoggingConfig 資源來自動配置 DataKit 的日誌採集，無需手動修改 DataKit 配置文件或重啓 DataKit，同樣也無需重啓業務。 二、前置條件 Kubernetes 集羣版本 1

日誌分析

收藏 評論

servicedeskplus 頭像

ServiceDeskPlus - 日誌分析是什麼？如何進行日誌分析？

日誌分析是對諸如計算機系統、網絡設備、應用程序等產生的日誌文件進行收集、處理、分析和解讀的一個過程。這些日誌文件記錄了系統和應用在運行過程中的各種事件、狀態變化、錯誤信息等詳細數據。 通過對這些日誌數據的分析，可以深入瞭解系統的運行情況、發現潛在問題、優化性能以及滿足合規性要求等。 1、日誌來源有哪些？ 所有的硬件、軟件在工作後都會產生日誌信息，這些信息都在不同位置，有些可通過日誌文件夾直接查看，

日誌分析 , 日誌管理 , 日誌分析軟件 , 運維

收藏 評論

zxc7563598 頭像

蘇琢玉 - PHP 日誌系統的最佳搭檔：一個 Go 寫的遠程日誌收集服務

之前折騰了一個 PHP 日誌系統，終於能讓項目的錯誤信息乖乖地記錄到日誌裏了。但問題又來了：日誌是存了，可我怎麼知道它什麼時候爆炸了？ 有些錯誤輕微到無關緊要，有些錯誤嚴重到能把整個系統送走，但如果我要知道這些錯誤，我得 SSH 進服務器，然後手動去翻日誌，效率低得要死。而且，多個服務器運行着同樣的代碼，有的報錯，有的沒事，我根本不知道到底哪裏出了問題。 於是，為了在 bug 出現的時候第一時間收

日誌分析 , php , go

收藏 評論