Cơ sở dữ liệu Vector và LLMs (phần 19)

Công nghệ gì sẽ dùng? (tiếp tục)

Sự thật là rằng tôi đã từng sử dụng ChromaDB và Faiss. Tôi sử dụng Faiss khi tôi không có ý định lưu dữ liệu vào
ổ cúng, chỉ giữ nó trong bộ nhớ, trong khi ChromaDB là một cái tôi sử dụng luôn luôn nhất, trừ phi tôi đang trong
một dự án nơi chúng đang sử dụng cái khác, hay với một công ty cái có giấy phép đăng kí hay hỗ trợ với một trong
các nhà sản xuất.
Đừng lo lắng về các metrics khác nhau hay thuật toán sử dụng bây giờ. Tôi sẽ không giải thích chúng, vì quyết định
để sử dụng một cái hay cái khác phụ thuộc nhiều vào dữ liệu sẽ được lưu giữ, và trong 90% trường hợp, thuật toán
cái sẽ cung cấp bạn tỉ lệ chính xác/hiệu quả trong HNSW.
Một điểm cái tạo một sự khác biệt là hỗ trợ Metadata. Trong Faiss, bạn không thể đi kèm các embeddings lưu giữ
với metadata, và nó là một đặc tính rất là hữu dụng cho lọc dữ liệu.
Điểm then chốt khác để xem xét là liệu chúng tích hợp đúng đắn với các thư viện bạn có kế hoạch sử dụng. Nếu bạn
đang làm việc trên một dự án với Langchain hay LlamaIndex, đảm bảo chúng hỗ trợ CSDL đã chọn. 5 cái tôi đã đề cập
là tương thích với cả hai thư viện.

Chia sẻ