Tự host Meilisearch trên VM với 2server: chống OOM khi index, giấu master key
Template meilisearch của 2server chạy một search engine dùng chung trên VM, độc lập với Soot. Bốn quyết định trong template cắt đúng hai lỗi hay gặp khi tự host search: OOM khi index và master key lọt vào code.
Tự host full-text search trên một VM thường hỏng ở hai chỗ, và cả hai đều không hiện ngay trong log. Một: mỗi app bê theo master key, đến khi một app lộ thì lộ luôn index của tất cả. Hai: một lần index lớn ăn sạch RAM, OOM killer chọn nhầm người chết và search gãy giữa giờ cao điểm.
Template meilisearch của 2server cắt cả hai bằng cách giới hạn tài nguyên và cách ly quyền ngay trong cấu hình mặc định — một Meilisearch dùng chung trên VM riêng của bạn, độc lập với Soot (Soot không chạy qua nó và cũng không cần cho nó chạy).
Bài này phân tích template đó. Chi tiết lệnh và biến cấu hình nằm trong tài liệu meilisearch của 2server.
Indexing bị giới hạn, không để ăn sạch RAM
Lần index đầu hoặc reindex sau khi đổi schema là lúc search engine đói RAM nhất. Trên một VM có thừa thì chỉ lag. Trên VM đang chạy app thật, Meilisearch có thể ép kernel phải chọn một process để giết — và process đấy không chắc là nó.
Template xử lý ở hai tầng:
- RAM cho indexing tối đa 50% RAM container. Nửa còn lại để dành cho search engine khi phục vụ query và cho phần OS trong container. Chặn trên trước khi đến OOM killer.
- Tmp indexing ghi ra disk thay vì RAM. Các file tạm sinh ra khi index — đúng chỗ ăn bộ nhớ nhanh nhất — được đẩy xuống disk. Disk chậm hơn RAM, nhưng disk đầy là một lỗi bạn nhìn thấy, còn RAM đầy là một container chết bất ngờ.
Tức là trên cùng một VM, phần còn lại của hệ thống sống qua được lần index lớn nhất, và lần index đó chỉ chậm chứ không kéo search chết theo.
Unprivileged user, root filesystem read-only
Container chạy bằng user không đặc quyền 65532:65532 và root filesystem của nó mount read-only: thư mục nào cần ghi phải được mount riêng, còn lại chỉ đọc. Thêm một quyết định nữa: không publish port ra ngoài host — traffic đến Meilisearch đi qua mạng nội bộ trên chính VM.
Đối với một service chỉ để nội bộ phục vụ app, đây là mặc định đúng: port không expose thì không có câu hỏi "ai đang scan port của tôi", và root filesystem chỉ đọc thu hẹp mặt bị ghi nếu process bị chiếm.
Master key ở tầng hạ tầng, mỗi index một client key
Đây là chỗ tự host hay hỏng nhất về vận hành: master key của Meilisearch cấp được mọi quyền — tạo index, xóa index, đọc hết. Nếu mỗi app cầm một bản copy "cho tiện", một lần leak là leak toàn bộ.
Trong template, master key cô lập ở tầng hạ tầng, không trao cho app. Thay vào đó 2server cấp một client API key riêng cho từng index sản phẩm: app của bạn chỉ cầm key có phạm vi đúng index nó cần. Một app lộ key thì lộ một index, master key vẫn nằm ở nơi app không đọc được.
Readiness có xác thực trước khi release
Một search container "up" vẫn có thể không sẵn sàng: index chưa load xong, hoặc đang busy. Readiness probe của template kiểm tra endpoint /indexes có xác thực — chứ không chỉ ping một port mở. Probe pass mới release phiên bản mới. Nghĩa là bản thay thế chỉ nhận traffic khi nó chứng minh được nó trả lời đúng API có bảo vệ, không phải chỉ khi process tồn tại.
Hai việc template không làm
Ranh giới quan trọng hơn tính năng:
- Không tự động backup hay migrate phiên bản Meilisearch. Khi nâng cấp, bạn cần snapshot thủ công trước. Xử lý nâng cấp như một thao tác có chuẩn bị, không phải restart định kỳ.
- Không phải phần phụ thuộc của Soot. Search engine này chạy cho app của bạn, trên VM của bạn, tách khỏi Soot. Soot data-pool lưu metadata của Soot trong PostgreSQL, không dùng Meilisearch — đừng đoán ngược.
Việc tiếp theo
Nếu bạn đang chạy một app cần search trên VM đã có 2server: đọc tài liệu template meilisearch, triển khai nó như một engine dùng chung, cấp mỗi index một client key riêng — và để master key ở chỗ app không bao giờ đọc. Trước lần nâng cấp đầu tiên, chụp một snapshot tay; đó là việc duy nhất template giao lại cho bạn.
