Hướng dẫn định tuyến cảnh báo Grafana

Lucas Simon
13:04:40 Thứ Ba, 16 tháng 4, 2024
Node.js

Định cấu hình Cảnh báo email kép trong Grafana

Việc quản lý cấu hình cảnh báo trong Grafana thường có thể yêu cầu tinh chỉnh, đặc biệt khi các điều kiện khác nhau yêu cầu thông báo cho các điểm liên hệ riêng biệt. Hiện tại, hệ thống cảnh báo được thiết lập để xử lý thống nhất mọi tình huống bằng cách thông báo cho một điểm liên lạc duy nhất, bất kể tình trạng cảnh báo cụ thể.

Thách thức hiện nay là tăng cường thiết lập này bằng cách chuyển cảnh báo đến hai địa chỉ email riêng biệt dựa trên bản chất của trình kích hoạt cảnh báo—lỗi so với điều kiện trùng khớp. Sự điều chỉnh này sẽ giúp ích trong việc giao tiếp có mục tiêu và đảm bảo rằng nhóm phù hợp sẽ giải quyết các vấn đề cụ thể một cách hiệu quả.

Yêu cầu Sự miêu tả
require('nodemailer') Tải mô-đun Nodemailer được sử dụng để gửi email từ Node.js.
require('express') Tải khung Express để xử lý các chức năng của máy chủ web trong Node.js.
express.json() Phần mềm trung gian trong Express để phân tích các tải trọng JSON đến.
createTransport() Tạo một đối tượng vận chuyển có thể tái sử dụng bằng cách sử dụng vận chuyển SMTP mặc định.
sendMail() Gửi email bằng cách sử dụng đối tượng vận chuyển.
app.post() Xác định một tuyến đường và liên kết nó với một chức năng cụ thể để thực thi khi tuyến đường đó được kích hoạt bởi một yêu cầu POST.
app.listen() Bắt đầu chấp nhận kết nối trên cổng được chỉ định.
fetch() Chức năng trình duyệt gốc được sử dụng để thực hiện các yêu cầu web và xử lý các phản hồi.
setInterval() Lên lịch thực hiện lặp lại một chức năng theo các khoảng thời gian đã đặt.

Giải thích về Tập lệnh cảnh báo Grafana

Các tập lệnh được cung cấp đóng vai trò như một giải pháp phụ trợ và giao diện người dùng để quản lý cảnh báo Grafana với các điểm liên hệ khác nhau dựa trên điều kiện cảnh báo. Tập lệnh phụ trợ sử dụng Node.js với khung Express và mô-đun Nodemailer. Thiết lập này cho phép tạo một máy chủ web lắng nghe các yêu cầu POST trên một cổng được chỉ định. Khi một cảnh báo được kích hoạt trong Grafana, nó sẽ gửi dữ liệu đến máy chủ này. Sau đó, máy chủ sẽ phân tích bản chất của cảnh báo—cho dù đó là do lỗi hay do điều kiện trùng khớp—và định tuyến email đến điểm liên hệ thích hợp bằng Nodemailer.

Tập lệnh giao diện người dùng được thiết kế để hiển thị trạng thái cảnh báo một cách linh hoạt trên trang web bằng cách sử dụng HTML và JavaScript đơn giản. Nó định kỳ tìm nạp trạng thái cảnh báo từ phần phụ trợ và cập nhật trang web tương ứng. Điều này đặc biệt hữu ích để theo dõi thời gian thực trong môi trường mà các nhóm khác nhau có thể cần được thông báo nhanh chóng về các loại cảnh báo cụ thể. Việc sử dụng 'fetch()' để thực hiện các yêu cầu web và 'setInterval()' để đặt tốc độ làm mới đảm bảo rằng trang tổng quan luôn cập nhật mà không cần can thiệp thủ công.

Định tuyến email động trong Cảnh báo Grafana

Node.js với Nodemailer và Grafana Webhook

const nodemailer = require('nodemailer');
const express = require('express');
const app = express();
const port = 3000;
app.use(express.json());
const transporter = nodemailer.createTransport({
  service: 'gmail',
  auth: {
    user: 'your-email@gmail.com',
    pass: 'your-password'
  }
});
app.post('/alert', (req, res) => {
  const { alertState, ruleId } = req.body;
  let mailOptions = {
    from: 'your-email@gmail.com',
    to: '',
    subject: 'Grafana Alert Notification',
    text: `Alert Details: ${JSON.stringify(req.body)}`
  };
  if (alertState === 'error') {
    mailOptions.to = 'contact-point1@example.com';
  } else if (alertState === 'ok') {
    mailOptions.to = 'contact-point2@example.com';
  }
  transporter.sendMail(mailOptions, (error, info) => {
    if (error) {
      console.log('Error sending email', error);
      res.status(500).send('Email send failed');
    } else {
      console.log('Email sent:', info.response);
      res.send('Email sent successfully');
    }
  });
});
app.listen(port, () => console.log(`Server running on port ${port}`));

Trực quan hóa giao diện người dùng cho trạng thái cảnh báo Grafana

JavaScript với HTML

<html>
<head>
<title>Grafana Alert Dashboard</title>
</head>
<body>
<div id="alertStatus"></div>
<script>
const fetchData = async () => {
  const response = await fetch('/alert/status');
  const data = await response.json();
  document.getElementById('alertStatus').innerHTML = `Current Alert Status: ${data.status}`;
};
fetchData();
setInterval(fetchData, 10000); // Update every 10 seconds
</script>
</body>
</html>

Quản lý cảnh báo nâng cao trong Grafana

Trong cấu hình Grafana nâng cao, việc quản lý cảnh báo dựa trên nhiều điều kiện và gửi thông báo đến các điểm cuối khác nhau có thể cải thiện đáng kể hiệu quả hoạt động. Bằng cách sử dụng khung cảnh báo linh hoạt của Grafana, người dùng có thể thiết lập các quy tắc phức tạp có phản ứng khác nhau tùy thuộc vào mẫu dữ liệu cụ thể hoặc trạng thái hệ thống. Tính linh hoạt này rất quan trọng đối với các hệ thống yêu cầu mức độ nghiêm trọng phản hồi khác nhau hoặc các bộ phận cần thông tin cụ thể. Grafana cho phép tạo nhiều kênh thông báo, có thể chuyển hướng đến nhiều địa chỉ email khác nhau hoặc các hệ thống thông báo khác như Slack, PagerDuty hoặc SMS.

Việc thiết lập các cấu hình như vậy bao gồm việc xác định các điều kiện cảnh báo trong Grafana và sử dụng các tập lệnh bên ngoài hoặc API Grafana để nâng cao chức năng. Ví dụ: bằng cách tích hợp Grafana với các giải pháp tập lệnh như Node.js, như đã trình bày, người dùng có thể lập trình logic tùy chỉnh để xử lý các trạng thái cảnh báo khác nhau. Phương pháp này cung cấp một cách tiếp cận đa sắc thái hơn để quản lý cảnh báo, đảm bảo rằng đúng người sẽ nhận được đúng thông tin vào đúng thời điểm, có thể là trước khi vấn đề leo thang.

  1. Làm cách nào để tạo cảnh báo trong Grafana?
  2. Bạn có thể tạo cảnh báo trực tiếp từ bảng điều khiển Grafana bằng cách chọn bảng bạn muốn cảnh báo, sau đó nhấp vào tab "Cảnh báo" và đặt các điều kiện sẽ kích hoạt cảnh báo.
  3. Grafana có thể gửi thông báo tới nhiều người nhận không?
  4. Có, Grafana có thể gửi thông báo đến nhiều người nhận bằng cách định cấu hình nhiều kênh thông báo và liên kết chúng với các quy tắc cảnh báo của bạn.
  5. Có thể tùy chỉnh cảnh báo Grafana dựa trên mức độ nghiêm trọng không?
  6. Có, bạn có thể tùy chỉnh cảnh báo dựa trên mức độ nghiêm trọng bằng cách sử dụng các điều kiện khác nhau trong quy tắc cảnh báo và định tuyến chúng đến các kênh thích hợp.
  7. Tôi có thể tích hợp các API bên ngoài với Grafana để có cảnh báo phức tạp hơn không?
  8. Có, Grafana hỗ trợ tích hợp với các API bên ngoài, cho phép thực hiện các cơ chế cảnh báo phức tạp hơn và logic thông báo tùy chỉnh.
  9. Làm cách nào để đảm bảo cảnh báo Grafana luôn được gửi, ngay cả khi máy chủ ngừng hoạt động?
  10. Để đảm bảo cảnh báo được gửi trong thời gian máy chủ ngừng hoạt động, bạn nên cân nhắc việc lưu trữ phiên bản Grafana và cơ sở dữ liệu của nó trên các máy chủ có độ sẵn sàng cao hoặc sử dụng Grafana Cloud để đảm bảo thời gian hoạt động mạnh mẽ.

Khả năng tùy chỉnh thông báo cảnh báo trong Grafana cho những người nhận khác nhau dựa trên điều kiện cảnh báo mang lại những lợi thế đáng kể cho việc giám sát hệ thống và ứng phó sự cố. Thông qua việc sử dụng tập lệnh trong Node.js và tích hợp khả năng cảnh báo linh hoạt của Grafana, quản trị viên có thể đảm bảo rằng thông tin quan trọng được chuyển tiếp kịp thời đến các bên liên quan thích hợp, từ đó nâng cao hiệu quả hoạt động và khả năng phản hồi.