Aider Polyglot là benchmark chỉnh sửa code đa ngôn ngữ được công bố bởi công cụ lập trình cặp AI Aider.
Aider Polyglot là một chuẩn chỉnh sửa mã trải rộng trên nhiều ngôn ngữ lập trình, được xuất bản bởi nhóm phát triển của agent mã hóa AI "Aider". Dựa trên các bài tập trong Bài tập, chúng tôi sẽ đo lường xem liệu LLM có thể chỉnh sửa chính xác mã bằng nhiều ngôn ngữ như Python, JavaScript, Java, Go, Rust và C++ hay không bằng cách sử dụng định dạng khác biệt duy nhất của Aider. Nó được cho là khác với các tiêu chuẩn ngành HumanEval và MMLU ở chỗ nó đo lường "độ chính xác của việc chỉnh sửa khác biệt mã hiện có" thay vì chỉ khả năng tạo mã. Cạm bẫy trong hoạt động thực tế kể từ năm 2026 là ngay cả khi một mô hình có điểm cao, độ chính xác sẽ thay đổi rất nhiều nếu định dạng chỉnh sửa được sử dụng trong trường (khác biệt thống nhất, TÌM KIẾM/THAY THẾ, v.v.) thay đổi, vì vậy người ta nói rằng trước khi giới thiệu nó, cần phải kiểm tra điều kiện thị trường ở định dạng tương tự như quy trình làm việc của công ty bạn. Ngoài ra, mặc dù chỉnh sửa khác biệt được cho là có hiệu quả về mặt chi phí vì nó tiêu thụ ít mã thông báo hơn so với tái tạo toàn văn bản, nhưng nó có xu hướng mất độ chính xác trong quá trình tái cấu trúc quy mô lớn, do đó, thông lệ tiêu chuẩn là chọn nó kết hợp với các tiêu chuẩn mã hóa khác.