Vector database lưu và tìm kiếm embedding ở quy mô tỷ vector
Cơ sở dữ liệu vector lưu trữ embedding đa chiều và tìm kiếm ngữ nghĩa trên hàng tỷ bản ghi chỉ trong mili giây, vượt trội so với cơ sở dữ liệu truyền thống.
LSM-Tree hoạt động thế nào, từ memtable đến compaction?
Giải thích chi tiết cách LSM-Tree hoạt động: từ memtable trong RAM, flush xuống SSTable trên đĩa, đến quá trình compaction hợp nhất dữ liệu với hai chiến lược leveled và size-tiered.
Product quantization nén vector 768 chiều xuống vài chục byte
Product quantization chia vector thành nhóm con, lượng tử hóa từng nhóm bằng codebook 256 centroid, nén vector 768 chiều xuống vài byte với recall trên 90%.