一、簡 介
Loki是受Prometheus啟發由Grafana Labs團隊開源的水平可擴充套件，高度可用的多租戶日誌聚合系統。 開發語言: Google Go。它的設計具有很高的成本效益，並且易於操作。使用標籤來作為索引，而不是對全文進行檢索，也就是說，你通過這些標籤既可以查詢日誌的內容也可以查詢到監控的資料籤，極大地降低了日誌索引的儲存。系統架構十分簡單，由以下3個部分組成 ：

Loki 是主伺服器，負責儲存日誌和處理查詢 。
promtail 是代理，負責收集日誌並將其傳送給 loki 。
Grafana 用於 UI 展示。

只要在應用程式伺服器上安裝promtail來收集日誌然後傳送給Loki儲存，就可以在Grafana UI介面通過新增Loki為資料來源進行日誌查詢（如果Loki伺服器效能不夠，可以部署多個Loki進行儲存及查詢）。作為一個日誌系統不關只有查詢分析日誌的能力，還能對日誌進行監控和報警

1. promtail收集並將日誌傳送給loki的 Distributor 元件
2. Distributor會對接收到的日誌流進行正確性校驗，並將驗證後的日誌分批並行傳送到Ingester
3. Ingester 接受日誌流並構建資料塊，壓縮後存放到所連線的儲存後端
4. Querier 收到HTTP查詢請求，並將請求傳送至Ingester 用以獲取記憶體資料 ，Ingester 收到請求後返回符合條件的資料 ；
5. 如果 Ingester 沒有返回資料，Querier 會從後端儲存載入資料並遍歷去重執行查詢 ，通過HTTP返回查詢結果

三、與 ELK 比 較
ELK雖然功能豐富，但規模複雜，資源佔用高，操作苦難，很多功能往往用不上，有點殺雞用牛刀的感覺。

curl -O -L "https://github.com/grafana/loki/releases/download/v1.5.0/loki-linux-amd64.zip" 
curl -O -L "https://github.com/grafana/loki/releases/download/v1.5.0/promtail-linux-amd64.zip
 
"
wget https://dl.grafana.com/oss/release/grafana-7.1.0-1.x86_64.rpm

五 安裝

mkdir  /data/loki/{chunks,index}
unzip loki-linux-amd64.zip
mv  loki-linux-amd64 /data/loki/

新建loki的配置檔案：
vi /data/loki/loki.yml

auth_enabled: false

server:
  http_listen_port: 3100

ingester:
  lifecycler:
    address: 172.16.230.84
    ring:
      kvstore:
        store: inmemory
      replication_factor: 1
    final_sleep: 0s
  chunk_idle_period: 5m
  chunk_retain_period: 30s

schema_config:
  configs:
  - from: 2020-07-21
    store: boltdb
    object_store: filesystem
    schema: v11
    index:
      prefix: index_
      period: 168h   #每張表的時間範圍6天

storage_config:
  boltdb:
    directory: /data/loki/index   #索引檔案儲存地址

  filesystem:
    directory: /data/loki/chunks  #塊儲存地址

limits_config:
  enforce_metric_name: false
  reject_old_samples: true
  reject_old_samples_max_age: 168h


chunk_store_config:
  # 最大可查詢歷史日期 90天
  max_look_back_period: 2160h
 
# 表的保留期90天
table_manager:
  retention_deletes_enabled: true
  retention_period: 2160h       

啟動 loki

cd /data/loki
./lock-linux-amd64  -config.file=/data/loki/loki.yml  &

安裝promtail

mkdir  /data/promtail
unzippromtail-linux-amd64.zip
mv  promtail-linux-amd64   /data/promtail/

#  prometail.yaml 配置檔案
[root@harbor promtail]# cat promtail.yaml 
server:
  http_listen_port: 9080
  grpc_listen_port: 0

positions:
  filename: /tmp/positions.ymal

clients:
  - url: http://172.16.230.84:3100/loki/api/v1/push

scrape_configs:
  - job_name: tomcat
    static_configs:
      - targets:
          - 172.16.230.84
        labels:
          job: tomcat
          host: 172.16.230.84
          __path__: /data/tomcat/logs/*

啟動

nohup  ./promtail  -config.file=/data/prometail/promtail.yaml &

六 安裝grafana

rpm -ivh  /data/tools/grafana-7.1.0-1.x86_64.rpm 

啟動

systemctl daemon-reload
systemctl start grafana-server
systemctl status grafana-server

七 grafana 使用

1. grafana 新增資料來源

原文連結：https://blog.csdn.net/qq_40236138/java/article/details/107230640

https://grafana.com/blog/2018/12/12/loki-prometheus-inspired-open-source-logging-for-cloud-natives/

https://github.com/grafana/loki/blob/master/docs/clients/promtail/configuration.md

https://github.com/grafana/loki/blob/v1.5.0/docs/clients/promtail/configuration.md

https://blog.csdn.net/z595746437/article/details/107255510