KamoCRM

Blog

Kỹ thuật10 tháng 3 năm 20266 phút đọc

Kiến trúc đằng sau thời gian hoạt động 99,9%

Thời gian hoạt động không phải là một chỉ số tiếp thị đối với chúng tôi. Đó là một ràng buộc kỹ thuật định hình mọi quyết định chúng tôi đưa ra. Khi toàn bộ doanh nghiệp của bạn hoạt động trên một nền tảng duy nhất, thời gian ngừng hoạt động không phải là một bất tiện. Đó là một dừng hoàn toàn. Trách nhiệm đó là điều chúng tôi coi trọng, và nó được phản ánh trong mọi lớp kiến trúc KamoCRM, từ cơ sở dữ liệu đến cân bằng tải.

Ở cơ sở, chúng ta chạy YugabyteDB như là kho dữ liệu chính của chúng ta. YugabyteDB là một cơ sở dữ liệu SQL phân tán tái tạo dữ liệu trên nhiều nút với sự tự động ngắt. Nếu một nút bị hỏng, cụm tiếp tục hoạt động mà không mất dữ liệu hay can thiệp thủ công. Trên đỉnh của nó, lớp ứng dụng của chúng ta bao gồm hơn 64 microservices không trạng thái chạy trên Kubernetes qua RKE2. Bởi vì mỗi dịch vụ không trạng thái, bất kỳ thực thể nào cũng có thể được thay thế hoặc tăng kích thước mà không ảnh hưởng đến những cái khác.

Giao tiếp thời gian thực thêm một lớp phức tạp khác. Hội nghị video, nhắn tin và gọi điện thoại đều yêu cầu kết nối bền vững và thời gian chờ thấp. Chúng tôi xử lý điều này với Janus WebRTC cho phương tiện truyền thông và NATS JetStream cho giao dịch thông điệp, cả hai đều được triển khai trong cấu hình có sẵn cao trên toàn bộ cụm của chúng tôi. Thậm chí tầng lưu trữ tập tin của chúng tôi, được cung cấp bởi MinIO, được cấu hình với mã hóa xóa để giữ dữ liệu bền vững.

Kết quả là một hệ thống không có một thành phần nào mà sự thất bại của nó sẽ làm cho phần còn lại bị hỏng. Cập nhật được gửi vài lần mỗi ngày như là việc triển khai, vì vậy việc phát hành không tốn chi phí cho khả năng sử dụng. Hàng ngàn chỉ số được theo dõi trực tiếp, và kỹ sư gọi gọi nghe về một sự bất thường trong vài giây. Đó là điều đằng sau con số 99,9%.

Nhóm Kamo

Những người viết mật mã