ReviewAI
Xếp hạngDanh mụcKhám pháTạp chíSo sánhMiễn phíTừ điển

MTEB (Băng ghế đánh giá mô hình nhúng)

MTEB là điểm chuẩn so sánh chéo hiệu suất của nhiều tác vụ như tìm kiếm, phân loại và phân cụm các mô hình nhúng.

MTEB (Điểm chuẩn nhúng văn bản lớn) là điểm chuẩn tiêu chuẩn ngành so sánh độ chính xác của các mô hình nhúng văn bản trên nhiều tác vụ như tìm kiếm, phân loại, phân cụm và tương tự về ngữ nghĩa, đồng thời kết quả được công bố trên bảng xếp hạng của Hugging Face. Điểm cao nhất chỉ là giá trị trung bình trên một tập dữ liệu công khai và một điều đáng tiếc đã biết là trong hoạt động thực tế, điểm có thể giảm đáng kể do các câu trong miền riêng của bạn hoặc các cụm từ dành riêng cho tiếng Nhật. Tính đến năm 2026, nhiều mô hình hàng đầu tuyên bố là đa ngôn ngữ, nhưng một số có đánh giá yếu đối với các nhiệm vụ tiếng Nhật, vì vậy việc xác minh bổ sung bằng cách sử dụng dữ liệu nội bộ là điều cần thiết trong lĩnh vực này. Ngoài ra, do đơn giá mã thông báo của các mô hình nhúng tính phí API khác nhau nhiều lần tùy thuộc vào kiểu máy, nên cách thực tế để tiến hành là so sánh không chỉ điểm MTEB mà còn cả ước tính chi phí dựa trên tâm lý thị trường và độ trễ, đồng thời chọn dựa trên sự cân bằng giữa độ chính xác và chi phí.

Thuật ngữ liên quan