Công Cụ Phát Hiện AI Có Chính Xác Không?

Câu trả lời ngắn gọn: không đủ đáng tin cậy để dùng một mình. Đây là cơ chế thực sự phía sau điều đó, không chỉ là một lời rào trước.

Công cụ phát hiện AI hoạt động như thế nào

Hầu hết các công cụ phát hiện văn bản AI không có một dấu hiệu bí mật nào chứng minh một văn bản được viết bởi máy. Thay vào đó, chúng đo các mẫu thống kê, mỗi lựa chọn từ ngữ có thể đoán trước được đến mức nào dựa trên các từ trước đó, câu có độ dài và cấu trúc đồng nhất đến mức nào, và chấm điểm văn bản dựa trên mức độ giống với đầu ra điển hình của mô hình ngôn ngữ. Đó là một ước tính xác suất, không phải một dấu vân tay, và nó được xây dựng trên các mẫu thay đổi mỗi khi một phiên bản mô hình mới thay đổi cách nó viết.

Vấn đề dương tính giả

Vì các công cụ phát hiện đối chiếu với văn bản "điển hình", bất cứ thứ gì viết theo phong cách bất thường đồng nhất hoặc trang trọng sẽ bị đánh dấu thường xuyên hơn, bao gồm cả nhiều văn bản do con người viết. Điều này được ghi nhận rõ ràng nhất ở những người không nói tiếng Anh bản xứ, những người có cấu trúc câu thường đều đặn hơn và ít mang tính thành ngữ hơn so với người bản xứ, điều mà các công cụ phát hiện đọc thành giống máy. Văn bản rất ngắn và văn bản mang tính khuôn mẫu nặng (thư xin việc, email công việc tiêu chuẩn) cũng dễ bị dương tính giả vì lý do tương tự.

Công cụ phát hiện và humanizer: một mục tiêu luôn di động

Toàn bộ một nhóm công cụ, AI humanizer như Undetectable AI và Humbot, tồn tại chỉ để viết lại văn bản do AI tạo ra sao cho đạt điểm thấp hơn trên các công cụ phát hiện này. Khi một công cụ phát hiện được cải thiện, các humanizer sẽ điều chỉnh; khi một humanizer trở nên giỏi trong việc đánh lừa một công cụ phát hiện cụ thể, nhà cung cấp công cụ đó sẽ huấn luyện lại để đối phó với mẫu đó. Không bên nào ổn định lâu, và đó chính là lý do không nên coi điểm số của một công cụ phát hiện đơn lẻ là kết luận cuối cùng, nhiều tháng hoặc nhiều năm sau khi công cụ được kiểm tra.

Cách sử dụng công cụ phát hiện đúng cách

• Coi một điểm AI cao là lý do để xem xét kỹ hơn, không phải là bằng chứng tự thân
• Với bất cứ điều gì có hậu quả thực sự, chấm điểm, tuyển dụng, xuất bản, hãy kết hợp công cụ phát hiện với việc đọc thực tế nội dung của con người
• Không chỉ dựa vào một công cụ phát hiện duy nhất; các công cụ khác nhau thường xuyên cho kết quả khác nhau trên cùng một văn bản
• Lưu ý rằng văn bản của người không nói tiếng Anh bản xứ và văn bản ngắn, trang trọng dễ bị dương tính giả hơn mức trung bình