ReviewAI
Xếp hạngDanh mụcKhám pháTạp chíSo sánhMiễn phíTừ điển

FactScore (Đánh giá tính xác thực của văn bản dài)

FactScore là chỉ số đánh giá tính xác thực, chia nhỏ một câu dài thành các sự kiện đơn giản và so sánh từng sự kiện với nguồn kiến ​​thức bên ngoài để xác định xem nó đúng hay sai.

FactScore là một chỉ số đánh giá đo lường tính thực tế của việc tạo câu dài. Nó được cho là được áp dụng rộng rãi như một tiêu chuẩn ngành và phương pháp này là chia câu đầu ra thành các đơn vị dữ kiện nguyên tử độc lập, so sánh từng dữ kiện với các nguồn kiến ​​thức đáng tin cậy như Wikipedia để xác định xem nó đúng hay sai và cho điểm tỷ lệ các dữ kiện đúng. Mặc dù được ca ngợi vì khả năng nắm bắt các mô tả hợp lý nhưng sai sót (hallucination) mà các chỉ báo khớp bề mặt như BLEU và ROUGE không thể phát hiện được, nhưng trong hoạt động thực tế vào năm 2026, người ta đã chỉ ra rằng chi phí phán đoán sẽ tăng lên khi sử dụng mô hình ngôn ngữ quy mô lớn để phán đoán và có những cạm bẫy sẽ làm tăng các phán đoán sai nếu nguồn kiến ​​thức lỗi thời hoặc không đủ. Về phương pháp lựa chọn trong lĩnh vực này, người ta cho rằng việc sử dụng nó kết hợp với các chỉ số thực tế khác và đánh giá thủ công là thực tế, sau khi xác nhận trước liệu các nguồn kiến ​​thức bao gồm lĩnh vực được đánh giá có sẵn hay không và liệu chi phí phán đoán có tương xứng với ngân sách (giá thị trường) để tiếp tục hoạt động hay không.

Thuật ngữ liên quan