AI Detector Có Chính Xác? Cách Kiểm Tra AI Viết

AI detector (công cụ phát hiện nội dung AI) không đủ chính xác để kết luận một bài viết do AI hay người viết, vì chúng chỉ đoán dựa trên mức độ dễ đoán của câu chữ chứ không truy được nguồn gốc văn bản. Chính OpenAI đã ngừng công cụ phát hiện văn bản AI của họ vào tháng 7/2023 với lý do độ chính xác thấp. Với người làm SEO, câu hỏi quan trọng hơn là Google có quan tâm tới điểm số đó không, và câu trả lời là không theo cách nhiều người lo. Google đánh giá nội dung có hữu ích không, không đánh giá nó được gõ bởi ai.

Người làm nội dung cân nhắc trước laptop, bên cạnh kết quả detector báo 72% AI và kính lúp soi lại bài viết

AI detector hoạt động như thế nào?

AI detector ước lượng xác suất một đoạn văn do mô hình ngôn ngữ viết, dựa trên việc câu chữ có dễ đoán hay không. Hai khái niệm hay được nhắc là perplexity, đo từ tiếp theo có bất ngờ không, và burstiness, đo độ dài và nhịp câu có thay đổi nhiều không. Mô hình ngôn ngữ có xu hướng chọn từ có xác suất cao và viết câu đều nhau, nên văn bản càng trơn tru, càng đều đặn thì càng dễ bị gắn nhãn AI. Vấn đề là rất nhiều văn bản do người viết cũng trơn tru và đều đặn, như hướng dẫn kỹ thuật, định nghĩa, hay bài viết theo khuôn SEO có cấu trúc rõ ràng. Detector không có cách nào biết văn bản thực sự được tạo ra thế nào, nó chỉ so với những mẫu nó từng học.

AI detector có chính xác không?

AI detector không đủ chính xác để làm bằng chứng, và hai nguồn đáng tin nhất đều chỉ ra điều này. Thứ nhất, OpenAI, công ty làm ra ChatGPT, từng ra mắt công cụ phân loại văn bản AI rồi ngừng nó vào tháng 7/2023 vì độ chính xác thấp. Khi công bố, OpenAI cho biết công cụ chỉ nhận đúng khoảng 26% văn bản AI và gắn nhầm khoảng 9% văn bản do người viết. Thứ hai, nghiên cứu của nhóm Stanford công bố năm 2023 với tiêu đề GPT detectors are biased against non-native English writers cho thấy các detector phổ biến liên tục xếp nhầm bài của người viết tiếng Anh không phải tiếng mẹ đẻ thành văn bản AI, trong khi bài của người bản ngữ được nhận đúng. Nhóm nghiên cứu cũng chỉ ra chỉ cần vài thay đổi câu lệnh đơn giản là vượt qua được detector, nghĩa là công cụ vừa báo nhầm người, vừa bỏ sót AI. Với tiếng Việt, mình chưa thấy nghiên cứu độc lập đáng tin nào đo độ chính xác, và phần lớn detector được xây dựng chủ yếu trên tiếng Anh, nên càng nên thận trọng.

Google có dùng AI detector để xếp hạng không?

Google chưa từng công bố dùng công cụ phát hiện AI trong xếp hạng. Trong hướng dẫn về nội dung hữu ích, Google đặt câu hỏi ai tạo nội dung, tạo như thế nào và vì sao, và nói rõ việc dùng AI hay tự động hóa không phải vấn đề nếu mục đích là giúp người đọc. Thứ Google xử lý là việc dùng tự động hóa để sản xuất hàng loạt nội dung nhằm thao túng thứ hạng, được xếp vào vi phạm chính sách spam, bất kể nội dung đó do người hay máy viết. Vì vậy một bài bị detector chấm 90% AI nhưng có số liệu thật và giải quyết đúng câu hỏi vẫn có thể xếp hạng tốt, còn một bài người viết 100% nhưng sao chép, sai sự thật vẫn có thể tụt. Chi tiết về ranh giới này có trong bài AI content có bị Google phạt không.

Khi nào dùng AI detector vẫn có ích?

AI detector vẫn có chỗ dùng nếu hiểu đúng giới hạn của nó. Với biên tập viên nhận bài từ cộng tác viên, điểm AI cao là tín hiệu để đọc kỹ hơn, kiểm tra xem bài có chỉ là bản AI chưa biên tập không, chứ không phải bằng chứng để kết luận. Với bài của chính team, detector hữu ích nhất khi so trước và sau biên tập, vì một bài được bổ sung trải nghiệm và số liệu thật thường ít bị gắn nhãn hơn. Các công cụ phổ biến gồm GPTZero, ZeroGPT, Quillbot AI Detector có bản miễn phí giới hạn độ dài, và Originality.ai trả phí dành cho người làm nội dung. Mình không xếp hạng chúng theo độ chính xác, vì chưa có đánh giá độc lập đáng tin cho tiếng Việt, và kết quả của cùng một đoạn văn trên các công cụ thường khác nhau.

Cách kiểm tra bài AI viết trước khi đăng

Thay vì kiểm tra xem bài có giống AI không, hãy kiểm tra những thứ quyết định bài có đáng đăng không. Năm bước dưới đây là quy trình biên tập blog này áp dụng cho mọi bài có AI hỗ trợ, team nhiều người viết có thể ghép vào quy trình duyệt content sẵn có.

1. Đối chiếu mọi con số và tên riêng. AI hay đưa ra số liệu nghe hợp lý nhưng không có nguồn. Con số nào không tìm được nguồn thì bỏ hoặc ghi rõ là quan sát riêng.
2. Kiểm tra với dữ liệu thật của sản phẩm. Giá, tính năng, giới hạn phải lấy từ trang chính thức hoặc mã nguồn, không để AI tự điền.
3. Thêm thứ AI không có. Ảnh chụp màn hình tự chụp, số liệu tự đo, kinh nghiệm thật và cả những lần làm không thành công.
4. Cắt câu sáo rỗng và câu thông báo. Câu mở đầu kiểu thông báo nội dung sắp trình bày không thêm thông tin gì cho người đọc.
5. Đọc lại dưới góc người tìm kiếm. Bài có trả lời đúng câu hỏi ngay từ đầu không, người đọc có phải tìm tiếp ở nơi khác không.

Câu hỏi thường gặp về AI detector

Các công cụ phát hiện AI có chính xác không?

Không đủ chính xác để làm bằng chứng. Chính OpenAI đã ngừng công cụ phát hiện của họ năm 2023 vì độ chính xác thấp, và một nghiên cứu của Stanford cho thấy các detector phổ biến hay xếp nhầm bài của người viết không dùng tiếng mẹ đẻ thành văn bản AI. Kết quả chỉ nên dùng như một tín hiệu tham khảo.

Google có dùng công cụ phát hiện AI để phạt website không?

Google chưa từng công bố dùng công cụ phát hiện AI để xếp hạng. Điều Google nói rõ là họ đánh giá chất lượng nội dung, không phải cách nội dung được tạo ra, và xếp việc dùng tự động hóa sản xuất hàng loạt để thao túng thứ hạng vào vi phạm chính sách spam.

Có nên sửa bài cho đến khi detector báo là người viết không?

Không nên lấy điểm detector làm mục tiêu. Sửa để qua detector thường chỉ đổi cách diễn đạt, không thêm giá trị cho người đọc. Nên sửa để bài có trải nghiệm, số liệu có nguồn và góc nhìn riêng, những thứ vừa tốt cho người đọc vừa là điều Google tìm kiếm.

AI detector có hoạt động tốt với tiếng Việt không?

Chưa có nghiên cứu độc lập đáng tin nào đo độ chính xác của các detector phổ biến trên tiếng Việt. Phần lớn công cụ được xây dựng và đánh giá chủ yếu trên tiếng Anh, nên với tiếng Việt càng nên coi kết quả là tham khảo.

Tập trung vào thứ người đọc kiểm tra được

Người đọc không chạy bài của bạn qua detector, họ kiểm tra xem con số có đúng không, lời khuyên có dùng được không. Một bài AI hỗ trợ nhưng có dữ liệu thật và biên tập kỹ thường tạo niềm tin hơn một bài người viết nhưng chung chung. Solytix viết bài dựa trên top 10 Google Việt Nam và dữ liệu thật đưa vào, chấm điểm SEO sau khi viết, còn phần kiểm tra số liệu và thêm trải nghiệm vẫn cần người biên tập, và đó cũng là lý do AI chưa thay được content writer. Bạn có thể dùng thử Solytix miễn phí 30 ngày để thử quy trình này với bài của mình.