博客 RSS 訂閱

haitangyijiu_640e92f08aef6 頭像

數新智能 - 雲環境中的日誌收集和處理方案

在雲環境中，高效的日誌收集與處理是系統監控和運維的關鍵。本文圍繞《雲環境中的日誌收集和處理方案》展開，先介紹日誌收集的兩種方式，再聚焦處理環節，探討寫入 kafka、共享存儲、S3 等路徑，分析使用 raft 組日誌集羣及 NewSQL 的方案，最後結合 Spark 端調度進行總結，為雲日誌管理提供多維度技術參考。 日誌收集-兩種方式 這裏是將pod中的日誌收集，放到一個指定的地方 首先是將

SQL , sqlserver , kafka

收藏 評論

chunzhendegaoshan 頭像

RestCloud - SQL Server到Hive：批處理ETL性能提升30%的實戰經驗

在企業數字化轉型進程中，將 SQL Server 的業務數據同步至 Hive 數據倉庫，是構建大數據分析平台的關鍵一步。然而，當數據量突破千萬級門檻，傳統同步方式往往陷入效率低下、穩定性差的困境。本文將分享使用ETLCLoud工具實現千萬級數據量下SQL Server到Hive高效同步的實戰經驗。 1.配置數據源 來到平台首頁進入數據源管理模塊。 在新建數據源中選擇SQLserver數據源模板

數據同步 , hive , 數據庫 , etl , sqlserver

收藏 評論

actionopensource 頭像

愛可生開源社區 - 醫療業務系統升級，這家三甲醫院為何牽手 OceanBase？（SQLServer->OceanBase）

數字化轉型已成為醫療健康行業發展的關鍵驅動力。其中，數據庫作為數據管理和信息化的核心底座，其安全性、穩定性與高效性至關重要。 本文系 OceanBase 重要生態夥伴上海愛可生信息技術股份有限公司（簡稱“愛可生”）投稿，將闡述國內某三甲醫院業務系統升級至 OceanBase 的全過程，以及技術迭代背後的創新點和成效。 如果醫院患者的個人信息、醫療記錄、科研數據等敏感信息泄露，小到個人，大到

oceanbase , 數據遷移 , sqlserver

收藏 評論

koogua 頭像

鳩摩智首席音效師 - 如何使用 PowerShell 腳本備份 SQL Server 數據庫 ？

對於任何依賴於數據存儲和檢索應用程序來説，數據庫管理都是關鍵所在。確保數據的完整性和可用性是最重要的，也是最基本的。所以，定期備份 SQL Server 數據庫至關重要。 在本文中，我們將演示如何創建 PowerShell 腳本，用於自動備份 SQL Server， 並使用 7-Zip 將備份文件歸檔。這種自動化不僅節省了您的時間，還提供了一種有效的方法來安全有序的備份存檔。 Step 1: P

PowerShell , sqlserver

收藏 評論

0xboo 頭像

0xBoo - PHP-FPM 進化史

最近有幸讀到一篇文章，一文將CGI 的進化史講的特別詳細，雖然我自己之前也整理過 CGI、FastCGI、PHP-FPM 相關的筆記，但是並沒有從原理的角度來認識 CGI。 CGI 的誕生 早些年的Web 應用很簡單，客户端通過瀏覽器發起請求，服務端直接返回響應。 隨着互聯網的發展，簡單的Web 應用已經不能滿足開發者們了。 我們希望Web服務器有更多的功能，飛速發展的同時還能讓不同語言的

php , php-fpm

收藏 評論

yujiaao 頭像

Yujiaao - 設置PHP，PHP-FPM和NGINX以在Docker上進行本地開發

pascallandau.com 設置PHP，PHP-FPM和NGINX以在Docker上進行本地開發 Windows 10下Docker上PHP入門。 帕斯卡·蘭道（Pascal Landau）發表於2018-07-08 22:00:00 您可能從新來的孩子那裏聽到了一個叫做“Docker”的消息？您是一名PHP開發人員，並且願意參與其中，但是您沒有時間研究它嗎？然後，本教程適合您！到最後，您應

php , php-fpm , windows10 , Docker

收藏 評論

biliangxianting 頭像

避涼閒庭 - 自學PHP筆記（一）PHP語法

本文章轉發來自：https://blog.csdn.net/KH_FC/a... PHP基本語法 php使用一對特殊的標記包含php代碼，與HTML代碼混在一起。當服務器解析頁面時，能夠自動過濾出PHP腳本並進行解釋，最後把生成的靜態網頁傳遞給客户端。 1.PHP標記 一般情況下，PHP代碼都被嵌入到HTMl文檔中，PHP代碼在HTML中嵌入時有以下幾種方式： 默認標記 默認標記是通過 "?

php安全 , php , php-fpm , php-laravel , php7

收藏 評論

duiniwukenaihe_60e4196de52b7 頭像

對你無可奈何 - Kuberntes中Sysctl中的配置(php-fpm併發只能300)

背景： kubernetes集羣中部署應用，對應用進行壓力測試。jmeter進行壓力測試大概是每秒300個左右的請求（每分鐘elasticsearch中採集的請求有18000個）。查看日誌有nginx的erro log: ​ 但是我的cpu 內存資源也都沒有打滿。通過搜索引擎搜索發現與下面博客的環境基本相似，php-fpm也是走的socket： ​ 參見：http://

kubernetes , php-fpm , 運維 , Nginx , Docker

收藏 評論

sukaaa 頭像

Suka - 記一次 centos7 + nginx + php-fpm 部署 wordpress

前置説明 斷斷續續，花了半天的時間才把這些內容都打通，特此分享給有需要的人 基礎軟件下載 nginx 對着人家官方指導搞，總不會錯的：https://nginx.org/en/linux_pa...，不多BB php74與php-fpm 參考這篇文檔：https://shouts.dev/articles/i... 先完成下載，測試成功啓動php-fpm即可，後面再配置 wordpress

wordpress , php , php-fpm , centos7 , Nginx

收藏 評論

koogua 頭像

鳩摩智首席音效師 - 解決 docker 掛載 php-fpm 配置文件無效問題

本來是想把 php-fpm 的配置文件獨立出來，這樣修改起來就方便，想當然的認為把 www.conf 配置文件掛載出來就好了，docker-compose.yml 中 PHP 容器部分內容如下： volumes: - ./html:/var/www/html - ./php/log:/var/log/php-fpm - ./php/conf.d/php.ini:/usr/local/e

php-fpm , Docker

收藏 評論

headofhouchang 頭像

後廠村村長 - 關於nginx fastcgi_pass php-fpm fastcgi cgi 之間的一些關聯

我們知道，nginx作為webserver，本身只能處理靜態資源文件； 對於動態的PHP請求，需要調用相應的PHP解釋器來執行； 因此需要配置fastcgi_pass，以實現nginx與php-fpm進程間的通信。 nginx與php-fpm進程間的通信有兩種方式： 1、TCP 就是IP加端口； 優點是可以跨服務器；缺點是相比下面的方法要慢； 配置示例

php , php-fpm , Nginx

收藏 評論

hppyvyv6 頭像

小陳運維 - Ubuntu安裝typecho博客

Ubuntu安裝typecho博客 簡介 名稱的來歷 Typecho 是由 type 和 echo 兩個詞合成的，來自於開發團隊的頭腦風暴。 Type，有打字的意思，博客這個東西，正是一個讓我們通過打字，在網絡上表達自己的平台。Echo，意思是回聲、反饋、共鳴，也是PHP裏最常見、最重要的函數，相信大部分PHP愛好者都是從 echo 'Hello,world!'; 開始自己的PHP編程之路的。 T

typecho , php , php-fpm , Nginx , Ubuntu

收藏 評論

koogua 頭像

鳩摩智首席音效師 - Ubuntu 24.04 上部署 nginx + php-fpm

nginx 是一個流行的 web 服務器，以其速度和可靠性而聞名，被許多頂級網站使用。要用 PHP 運行網站，您需要設置 php-fpm，nginx 與 php-fpm 一起處理 PHP 文件並將其顯示給用户，幫助網站更快地加載並處理更多流量。 本教程將幫助您在 ubuntu 24.04 系統上安裝和配置 NGINX 和 PHP-FPM，創建虛擬主機並使用 Let ' s Encrypt SSL

php-fpm , Nginx

收藏 評論

lslove 頭像

捕風 - Nacos 動態配置實現原理

1. 簡介 Nacos是阿里巴巴2018年7月份開源的項目，全稱為Naming Configuration Service， 專注於服務發現和配置管理領域 其中，動態配置消除了配置變更時重新部署應用和服務的需要，讓配置管理變得更加高效和敏捷。 Nacos提供了一個簡潔易用的UI，管理所有的服務和應用的配置, 還提供包括配置版本跟蹤、 一鍵回滾配置的配置管理特性，幫助其更安全地在生

spring , nacos , springcloud , springboot

收藏 評論

linybjikezhilu 頭像

linyb極客之路 - 聊聊在springcloud gateway如何獲取請求體

前言 在我們擴展scg時，獲取requestbody也是一個挺常見的需求了，比如記錄日誌，我們要獲取請求體裏面的內容。在HTTP協議中，服務器接收到客户端的請求時，請求體（RequestBody）通常是以流的形式傳輸的。這個流在設計上是隻讀且不可重複讀取的。即request body只能讀取一次，但我們很多時候是更希望這個requestbody可以被多次讀取，那我們今天就來聊下這個話題 實現思路

springcloud

收藏 評論

awbeci 頭像

Awbeci - SpringCloud-解決WebFlux異步線程無法獲取ThreadLocal中的用户信息

前言 之前閲讀《Spring微服務實戰》這本書時，裏面提供了微服務如何存儲用户的信息，但是最近升級到了Java17以及SpringCloud2022.0.0之後，異步編程是官方推薦的主流寫法，而之前的寫法是同步的，所以在存儲和解析用户信息時導致獲致不到用户信息情況，下面我們來解決這個問題。 操作 我們先看看之前的寫法： UserContext.java @Component public clas

webflux , springcloud , springboot , JAVA

收藏 評論

zhaoyun_blog 頭像

10x - 微服務項目中，不同部署環境的配置文件(dev、sit、uat、prod)

大學畢業後，終於找到了一份Java後端的工作，這幾天在看公司之前的代碼；主要是因為公司需要重構一個老項目，這才讓我有機會看到之前的大部分代碼；作為一個應屆生，項目經歷屬實寒酸，以下是我這兩天閲讀源碼，瞭解業務的一套流程，僅僅是自己摸索出來的（僅供參考）；好在項目的前端後端都在本地跑起來了，調試起來非常方便； 第一步，秉持着業務優先的原則，瞭解這個項目的業務背景是十分必要的，最好可以拿自己的話梳

springcloud , springboot , JAVA

收藏 評論

macrozheng 頭像

macrozheng - 全面升級！一套基於最新版Spring Cloud的微服務實戰項目！

最近把mall-swarm項目升級支持了最新版Spring Cloud+Spring Boot 3+JDK17，今天就來介紹下mall-swarm項目做了哪些升級，包括依賴的升級、框架的用法升級以及運行部署的改動，希望對大家有所幫助！ mall-swarm項目簡介 這裏還是簡單介紹下mall-swarm項目吧，mall-swarm項目（11k+star）是一套微服務商城系統，採用了Spring C

spring , springcloud , springboot , JAVA , 後端

收藏 評論

wuliaodeqie 頭像

無聊的企鵝 - Nacos服務註冊與發現的原理

服務調用問題 單實例情況：可以採用點對點的 HTTP 直接調用，採用 IP + Port + 接口的形式進行。也可以對外暴露 WebService 服務供外部模塊調用，但 WebService 的形式 顯示比 HTTP的形式稍重一些，在實際的業務開發過程中，越來越的產品開發採用輕量級的 HTTP 協議進行數據交互。如果模塊增多，將會形成蜘蛛網的形式，非常不利於開發維護。 多實例的情況：為應對服務

微服務 , nacos , springcloud , 註冊中心 , 後端

收藏 評論

awbeci 頭像

Awbeci - SpringCloud-WebClient使用Get和Post請求

前言 這是一篇關於SpringCloud中使用webclient調用微服務的總結性文章，使用期間遇到好多問題及其解決方法，希望幫助到大家。 準備 首先我們在SpringCloud項目中配置WebClient,如下所示： @Component public class WebClientConfig { @Bean @LoadBalanced public WebClient

springcloud , JAVA

收藏 評論

yu_670a3980ed436 頭像

玉喵 - SpringCloud的常見組件

Spring Cloud 是一系列框架的集合，它利用了 Spring Boot 的開發便利性，提供了微服務開發中所需的各種工具，包括配置管理、服務發現、斷路器、智能路由、微代理、控制總線、一次性令牌、全局鎖、領導選舉、分佈式會話、集羣狀態等。以下是 Spring Cloud 中一些主要的組件： 1. Spring Cloud Config 用於集中化管理所有微服務環境下的配置，可以將配置放到遠程服

springcloud

收藏 評論

lyflexi 頭像

月半大熊貓 - IDEA久違了！FeignX插件支持方法級別的導航跳轉

需求調研：發現身邊的同事追蹤業務代碼的時候，如果遇見feign接口，大家都是通過全局搜url進一步找到遠程服務的實現。一旦項目大起來，路徑變得複雜甚至重名之後，這將會是災難。 市面上並沒有很好的IDEA插件支持feign接口的解析以及相對應的遠程服務之間的跳轉，因此本人貓哥親自做了一款插件FeignX，並開源出來給大家免費使用。 已上架idea插件市場, 搜索FeignX下載安裝： Fei

feign , springcloud , intellij-idea , JAVA , plugins

收藏 評論

macrozheng 頭像

macrozheng - 輕量級Nacos來了！佔用資源極低，性能炸裂！

Nacos作為一款非常流行的微服務註冊中心，我們在構建微服務項目時往往會使用到它。最近發現一款輕量級的Nacos項目r-nacos，佔用內存極低，性能也很強大，分享給大家。本文就以我的mall-swarm微服務電商實戰項目為例，來聊聊它在項目中的使用。 r-nacos簡介 r-nacos是一款使用rust實現的nacos服務，對比阿里的nacos來説，可以提供相同的註冊中心和配置中心功能。同時它佔

springcloud , springboot , JAVA , 後端

收藏 評論

macrozheng 頭像

macrozheng - 入職的新公司是微服務項目，慌了！

不知道大家有沒有這樣的經歷：入職了一家新公司，接觸的項目是微服務項目，而自己之前接觸的都是單體項目，不知道如何下手項目，心裏會比較慌。今天就以我的mall-swarm微服務電商實戰項目為例，來聊聊如何快速上手微服務項目。 mall-swarm項目簡介 這裏先簡單介紹下mall-swarm項目，mall-swarm項目（11k+star）是一套微服務商城系統，採用了2024最新微服技術棧，涵蓋Spr

springcloud , springboot , JAVA , 後端

收藏 評論