Logging

Logging framework như Log4j, Winston, và Bunyan là các thư viện hỗ trợ ghi log trong ứng dụng, giúp ghi lại thông tin hoạt động, cảnh báo, lỗi, hoặc debug trong quá trình chạy chương trình.

1. Log4j (Java)

• Một thư viện logging phổ biến cho Java, được phát triển bởi Apache.

• Cung cấp nhiều cấp độ log như DEBUG, INFO, WARN, ERROR, FATAL.

• Hỗ trợ ghi log ra file, console, database, hoặc gửi qua mạng.

• Log4j 2 là phiên bản nâng cấp với hiệu suất tốt hơn và khả năng mở rộng cao hơn.

• ⚠️ Lưu ý: Log4j từng gặp lỗi bảo mật nghiêm trọng Log4Shell (CVE-2021-44228).

2. Winston (Node.js)

• Một thư viện logging phổ biến trong hệ sinh thái Node.js.

• Hỗ trợ logging ở nhiều cấp độ như error, warn, info, debug.

• Có thể ghi log ra nhiều định dạng khác nhau như file, console, database, hoặc API từ xa.

• Dễ dàng tùy chỉnh với các transport (các nơi lưu trữ log như file, cloud, MongoDB...).

3. Bunyan (Node.js)

• Một logger hiệu suất cao cho Node.js.

• Tạo log theo định dạng JSON giúp dễ dàng phân tích và xử lý bằng công cụ khác.

• Hỗ trợ streams, cho phép ghi log đồng thời ra nhiều nơi (console, file, API...).

• Tối ưu cho ứng dụng chạy trong môi trường microservices.

Khi nào nên dùng Logging Framework?

• Khi cần theo dõi lỗi và hoạt động của hệ thống.

• Khi cần lưu log có cấu trúc để dễ tìm kiếm và phân tích.

• Khi muốn giám sát hiệu suất ứng dụng.

• Khi triển khai ứng dụng trên cloud hoặc microservices.

Logging trong Cloud hoặc Microservices đòi hỏi cách tiếp cận khác so với logging trong ứng dụng đơn lẻ, vì hệ thống phân tán và có nhiều service chạy trên nhiều máy chủ hoặc container khác nhau. Dưới đây là cách triển khai logging hiệu quả cho Cloud/Microservices.

---

1. Yêu cầu của Logging trong Cloud/Microservices

✅ Tập trung hóa log (Centralized Logging): Do các service chạy phân tán, cần một hệ thống thu thập log tập trung.
✅ Định dạng log có cấu trúc (Structured Logging): Dùng JSON hoặc định dạng có thể phân tích dễ dàng.
✅ Hỗ trợ đa nền tảng (Multi-Platform): Ghi log từ container, serverless, API gateway...
✅ Theo dõi và tìm lỗi dễ dàng (Tracing & Debugging): Hỗ trợ correlation ID giữa các service.
✅ Tích hợp với hệ thống giám sát (Monitoring & Alerting): Kết hợp với Prometheus, Grafana, Kibana...

---

2. Các Công Cụ Logging Phổ Biến Cho Cloud/Microservices

Dưới đây là một số công cụ logging phổ biến:

3. Cách Triển Khai Logging Cho Cloud/Microservices

3.1. Ghi Log Có Cấu Trúc (Structured Logging)

Sử dụng JSON thay vì log dạng text để dễ phân tích:

Ví dụ logging trong Node.js với Winston

javascript

CopyEdit

const winston = require("winston"); const logger = winston.createLogger({ level: "info", format: winston.format.json(), transports: [ new winston.transports.Console(), new winston.transports.File({ filename: "app.log" }), ], }); // Ghi log logger.info({ message: "User logged in", userId: 123 });

---

3.2. Logging Trong Kubernetes (K8s)

Trong Kubernetes, log từ container có thể thu thập bằng:

• Fluentd (đẩy log vào Elasticsearch)

• Loki (Grafana) (nhẹ hơn ELK)

• Cloud Logging (AWS, GCP, Azure)

Ví dụ: Cấu hình Fluentd để lấy log từ Kubernetes và gửi vào Elasticsearch:

yaml

CopyEdit

apiVersion: v1 kind: ConfigMap metadata: name: fluentd-config namespace: kube-system data: fluent.conf: | <source> @type tail path /var/log/containers/*.log pos_file /var/log/fluentd-containers.log.pos tag kubernetes.* format json </source> <match kubernetes.**> @type elasticsearch host elasticsearch-service port 9200 logstash_format true </match>

---

3.3. Thêm Correlation ID để Theo Dõi Request

Khi có nhiều microservices, cần Correlation ID để theo dõi request xuyên suốt hệ thống.

Ví dụ Correlation ID trong Express (Node.js)

javascript

CopyEdit

const express = require("express"); const { v4: uuidv4 } = require("uuid"); const app = express(); // Middleware thêm Correlation ID app.use((req, res, next) => { req.correlationId = req.headers["x-correlation-id"] || uuidv4(); res.setHeader("x-correlation-id", req.correlationId); next(); }); app.get("/", (req, res) => { console.log(`Correlation ID: ${req.correlationId}`); res.send("Hello World"); }); app.listen(3000, () => console.log("Server started"));

🛠️ Khi dùng ELK hoặc Loki, có thể tìm log theo correlationId.

---

3.4. Gửi Log Tới Hệ Thống Tập Trung

Các service có thể gửi log đến hệ thống tập trung như Elasticsearch, Loki, Cloud Logging bằng Fluentd hoặc Winston.

Ví dụ: Cấu hình Winston gửi log lên Elasticsearch:

javascript

CopyEdit

const { ElasticsearchTransport } = require("winston-elasticsearch"); const esTransport = new ElasticsearchTransport({ level: "info", clientOpts: { node: "http://localhost:9200" }, }); const logger = winston.createLogger({ transports: [esTransport], }); logger.info("Service started!");

---

4. Kết Hợp Logging Với Monitoring

Ngoài logging, có thể kết hợp với:

• Prometheus + Grafana để giám sát hiệu suất.

• OpenTelemetry để tracking request giữa các microservices.

• Jaeger hoặc Zipkin để theo dõi distributed tracing.

---

5. Tổng Kết

🔹 Sử dụng structured logging (JSON) để dễ phân tích.
🔹 Ghi log tập trung (Centralized Logging) với ELK, Loki, Fluentd.
🔹 Thêm Correlation ID để theo dõi request giữa các service.
🔹 Tích hợp với monitoring như Prometheus, OpenTelemetry.
🔹 Gửi log lên cloud (AWS CloudWatch, Google Cloud Logging, Azure Monitor).

Bạn đang làm việc với cloud nào (AWS, GCP, Azure) hay chạy Kubernetes? 🚀

4o