ELK分散式日誌+NLog在.NetCore中的應用

来源:https://www.cnblogs.com/minghon/archive/2019/11/13/11853157.html
-Advertisement-
Play Games

一、ELK簡介 ELK是Elasticsearch、Logstash和Kibana首字母的縮寫。這三者均是開源軟體,這三套開源工具組合起來形成了一套強大的集中式日誌管理平臺 Elasticsearch是一個分散式搜索和分析引擎,具有高可伸縮、高可靠和易管理等特點,基於Apache Lucene構建, ...


一、ELK簡介

       ELK是Elasticsearch、Logstash和Kibana首字母的縮寫。這三者均是開源軟體,這三套開源工具組合起來形成了一套強大的集中式日誌管理平臺

Elasticsearch是一個分散式搜索和分析引擎,具有高可伸縮、高可靠和易管理等特點,基於Apache Lucene構建,能對大容量的數據進行接近實時的存儲、搜索和分析操作。通過簡單的配置,Elasticsearch就會幫你管理集群、分片、故障轉移、主節點選舉等,還提供集群狀態的監控介面。

       Logstash是一個用來搜集、解析、過濾日誌的工具。支持幾乎任何類型的日誌,包括系統日誌、業務日誌和安全日誌,支持file、syslog、tcp、stdin、redis和kafka等多種接收方式。支持elasticrsearch、email、exec、nagios、tcp、hdfs等多種方式輸出

       Kibana是一個開源的分析與可視化平臺,用於搜索、分析和可視化存儲在 Elasticsearch中的數據,然後以圖表的方式展現出來,還允許用戶自定義查詢、過濾和彙總數據。

二、安裝(這裡以windows為例)

       1. 第一步:下載Elasticsearch 下載地址:https://www.elastic.co/cn/downloads/elasticsearch 選擇你適合的平臺版本,如下圖所示:

      2. 下載Logstash 下載地址:https://www.elastic.co/cn/downloads/logstash,選擇你適合的平臺,如下圖所示:

 

       3.下載Kibana,下載地址:https://www.elastic.co/cn/downloads/kibana,選擇你適合的平臺,如下圖所示: 

     將壓縮包解壓到文件,如圖所示:

  切換到elasticsearch-7.3.2\bin,點擊elasticsearch.bat即可完成安裝,打開http://localhost:9200/如下圖所示即安裝完成

      安裝node.jsgrunt,從地址:https://nodejs.org/en/download/ 下載相應系統的msi,雙擊安裝

    打開命令提示符輸入npm install -g grunt-cli,如下圖所示則grunt安裝完成

      進入\elasticsearch-7.3.2\config,打開elasticsearch.yml,在文件末尾加上以下代碼:

   http.cors.enabled: true

   http.cors.allow-origin: "*"

  雙擊elasticsearch.bat重啟es

  下載Head,下載地址:https://github.com/mobz/elasticsearch-head,下載後將elasticsearch-head-master 解壓到elasticsearch-7.3.2文件夾下,如圖所示:

     修改elasticsearch-head-master文件夾下的Gruntfile.js,加上hostname:’*’

     \elasticsearch-7.3.2\elasticsearch-head-master文件夾下執行npm install

     安裝完成後執行grunt server 或者npm run start 運行head插件,http://瀏覽器下訪問http://localhost:9100/

     logstash安裝:解壓後啟動使用配置文件就可以了

       Kibana安裝:kibana-7.3.2\config文件夾下修改kibana.yml, 取消server.portserver.hostserver.nameelasticsearch.hostsi18n.locale前面的#號,並將i18n.locale的值改為zh-CN,運行bin文件夾下的kibana.bat,打開localhost:5601,如圖所示則安裝成功

三、.Net Core使用Nlog調用ELK寫入日誌

        1、NuGet安裝依賴

      2、配置nlog.config

<?xml version="1.0" encoding="utf-8" ?>
<nlog xmlns="http://www.nlog-project.org/schemas/NLog.xsd"
      xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
      internalLogToConsole="true">
  <extensions>
    <add assembly="NLog.Targets.ElasticSearch"/>
  </extensions>

  <targets async="true">
    <!--https://github.com/reactive-markets/NLog.Targets.ElasticSearch/wiki-->
    <target xsi:type="ElasticSearch"
            name="ElasticSearch"
            uri="http://127.0.0.1:9200"
            index="Web"
            documentType="logevent"
            includeAllProperties="false"
            requireAuth="false">
      <field name="host" layout="${machinename}" />
      <field name="application"
                 layout="${applicationName}" />
      <field name="logged" layout="${date}" />
      <field name="level" layout="${level}" />
      <field name="message" layout="${message}" />
      <field name="logger" layout="${logger}" />
      <field name="callSite" layout="${callsite:filename=true}" />
      <field name="exception" layout="${exception:tostring}" />
      <field name="IP" layout="${aspnet-request-ip}" />
      <field name="User" layout="${aspnetcore-request-user}" />
      <field name="serverName" layout="${machinename}" />
      <field name="url" layout="${aspnetcore-request-url}" />
    </target>
    
    
  
  </targets>
  <rules>
    <logger name="*" minlevel="INFO" writeTo="ElasticSearch" />
  </rules>
</nlog>
View Code

      3、Startup.cs配置

     4、應用

      可以看到以下數據則表示調用成功

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 本文收錄在Python從入門到精通系列文章系列 在分享本章節的內容之前,先來研究一道數學題,請說出下麵的方程有多少組正整數解。 事實上,上面的問題等同於將8個蘋果分成四組每組至少一個蘋果有多少種方案。想到這一點問題的答案就呼之欲出了。 可以用Python的程式來計算出這個值,代碼如下所示。 """ ...
  • class Solution: """ @param A: an integer array @return: nothing """ def sortIntegers(self, A): new_list = list(A) list_len = len(new_list) for i in ra... ...
  • 1. 多態 1.1 什麼是多態 多態指的是一類事物有多種形態。 動物有多種形態:人,狗,豬。 import abc class Animal(metaclass=abc.ABCMeta): #同一類事物:動物 @abc.abstractmethod def talk(self): pass clas ...
  • 多態 多態的概述 同一個對象,在不同時刻表現出來的不同形態 多態的前提和體現 有繼承/實現關係 有方法重寫關係 有父類引用指向子類對象 多態中成員訪問特點 成員變數 :編譯看左邊,執行看左邊 成員方法 :編譯看左邊,執行看右邊 為什麼成員變數和成員方法訪問不一樣呢 因為成員方法有重寫,而成員變數不一 ...
  • 本文主要記錄瞭如何將將前端的對象數組通過Json字元串傳到後端,併在後端將Json字元串轉換為對象集合。 ...
  • 最近公司在用到SpringBoot整合Mybatis時當web端頁面數據增多時需要使用分頁查詢以方便來展示數據。本人對分頁查詢進行了一些步驟的總結,希望能夠幫助到有需要的博友。如有更好的方式,也希望評論留言,本人以作更好的改進。 SpringBoot+Mybatis+PageHelper實現分頁 以 ...
  • 1. 繼承 1.1 什麼是繼承 繼承是一種創建新類的方式,在python中,新建的類可以繼承一個或多個父類,父類又可稱為基類或超類,新建的類稱為派生類或子類。 python中類的繼承分為:單繼承和多繼承。 class ParentClass1: #定義父類 pass class ParentClas ...
  • 在軟體業,AOP為Aspect Oriented Programming的縮寫,意為:面向切麵編程,通過預編譯方式和運行期動態代理實現程式功能的統一維護的一種技術。AOP是軟體開發中的一個熱點,利用AOP可以對業務邏輯的各個部分進行隔離,從而使得業務邏輯各部分之間的耦合度降低,提高程式的可重用性。 ...
一周排行
    -Advertisement-
    Play Games
  • GoF之工廠模式 @目錄GoF之工廠模式每博一文案1. 簡單說明“23種設計模式”1.2 介紹工廠模式的三種形態1.3 簡單工廠模式(靜態工廠模式)1.3.1 簡單工廠模式的優缺點:1.4 工廠方法模式1.4.1 工廠方法模式的優缺點:1.5 抽象工廠模式1.6 抽象工廠模式的優缺點:2. 總結:3 ...
  • 新改進提供的Taurus Rpc 功能,可以簡化微服務間的調用,同時可以不用再手動輸出模塊名稱,或調用路徑,包括負載均衡,這一切,由框架實現並提供了。新的Taurus Rpc 功能,將使得服務間的調用,更加輕鬆、簡約、高效。 ...
  • 本章將和大家分享ES的數據同步方案和ES集群相關知識。廢話不多說,下麵我們直接進入主題。 一、ES數據同步 1、數據同步問題 Elasticsearch中的酒店數據來自於mysql資料庫,因此mysql數據發生改變時,Elasticsearch也必須跟著改變,這個就是Elasticsearch與my ...
  • 引言 在我們之前的文章中介紹過使用Bogus生成模擬測試數據,今天來講解一下功能更加強大自動生成測試數據的工具的庫"AutoFixture"。 什麼是AutoFixture? AutoFixture 是一個針對 .NET 的開源庫,旨在最大程度地減少單元測試中的“安排(Arrange)”階段,以提高 ...
  • 經過前面幾個部分學習,相信學過的同學已經能夠掌握 .NET Emit 這種中間語言,並能使得它來編寫一些應用,以提高程式的性能。隨著 IL 指令篇的結束,本系列也已經接近尾聲,在這接近結束的最後,會提供幾個可供直接使用的示例,以供大伙分析或使用在項目中。 ...
  • 當從不同來源導入Excel數據時,可能存在重覆的記錄。為了確保數據的準確性,通常需要刪除這些重覆的行。手動查找並刪除可能會非常耗費時間,而通過編程腳本則可以實現在短時間內處理大量數據。本文將提供一個使用C# 快速查找並刪除Excel重覆項的免費解決方案。 以下是實現步驟: 1. 首先安裝免費.NET ...
  • C++ 異常處理 C++ 異常處理機制允許程式在運行時處理錯誤或意外情況。它提供了捕獲和處理錯誤的一種結構化方式,使程式更加健壯和可靠。 異常處理的基本概念: 異常: 程式在運行時發生的錯誤或意外情況。 拋出異常: 使用 throw 關鍵字將異常傳遞給調用堆棧。 捕獲異常: 使用 try-catch ...
  • 優秀且經驗豐富的Java開發人員的特征之一是對API的廣泛瞭解,包括JDK和第三方庫。 我花了很多時間來學習API,尤其是在閱讀了Effective Java 3rd Edition之後 ,Joshua Bloch建議在Java 3rd Edition中使用現有的API進行開發,而不是為常見的東西編 ...
  • 框架 · 使用laravel框架,原因:tp的框架路由和orm沒有laravel好用 · 使用強制路由,方便介面多時,分多版本,分文件夾等操作 介面 · 介面開發註意欄位類型,欄位是int,查詢成功失敗都要返回int(對接java等強類型語言方便) · 查詢介面用GET、其他用POST 代碼 · 所 ...
  • 正文 下午找企業的人去鎮上做貸後。 車上聽同事跟那個司機對罵,火星子都快出來了。司機跟那同事更熟一些,連我在內一共就三個人,同事那一手指桑罵槐給我都聽愣了。司機也是老社會人了,馬上聽出來了,為那個無辜的企業經辦人辯護,實際上是為自己辯護。 “這個事情你不能怪企業。”“但他們總不能讓銀行的人全權負責, ...