Turnitin là một trong những mô hình kiểm tra đạo văn nổi tiếng và đáng tin cậy nhất trên thị trường và được các tổ chức học thuật sử dụng rộng rãi. Vào tháng 2023 năm XNUMX, hệ thống này đã phát triển để bao gồm mô hình phát hiện AI và mở rộng các tính năng của nó để theo kịp thế giới AI luôn thay đổi.
Nhưng mô hình phát hiện AI mới này hoạt động như thế nào? Và bạn có thể tin tưởng nó? Trong hướng dẫn này, chúng ta sẽ khám phá trình phát hiện AI của Turnitin từ A đến Z, bao gồm cách thức hoạt động, cách diễn giải kết quả và độ chính xác của công cụ này.
Vì vậy, nếu bạn đã sẵn sàng tìm hiểu sâu hơn về Turnitin, hãy bắt đầu.
Turnitin hoạt động như thế nào để phát hiện AI?
Turnitin có cách tiếp cận độc đáo để phát hiện nội dung do AI tạo ra. Nó liên quan đến sự kết hợp của các thuật toán nâng cao, học máy và phân tích ngôn ngữ.
Hệ thống này được thiết kế để xác định các đoạn văn bản có mẫu phù hợp với việc được tạo bởi AI hoặc Mô hình ngôn ngữ lớn (LLM). Chúng có thể bao gồm ChatGPT-3, ChatGPT-3.5 và các mô hình AI tương tự.
Nghe có vẻ đơn giản như lời giải thích này, nhưng có rất nhiều thứ diễn ra trong quá trình này hơn là những gì bạn thấy. Có một loạt bước mà công cụ phát hiện AI của Turnitin sử dụng để gắn cờ nội dung do công cụ viết AI tạo ra, trong đó mỗi bước đóng một vai trò quan trọng trong quy trình. Các bước này bao gồm:
- Xử lý hồ sơ: Khi bạn gửi bài tập qua Turnitin, trước tiên bài tập đó sẽ được chia thành các phần văn bản nhỏ hơn. Đây thường là vài trăm từ mỗi phần để giúp phân tích văn bản theo ngữ cảnh và cải thiện độ chính xác của Turnitin.
- Tính điểm phân đoạn: Sau đó, mỗi đoạn văn bản được mô hình phát hiện AI chấm điểm theo thang điểm từ 0 đến 1. Điểm 0 cho biết rằng văn bản đó là của con người và điểm 1 cho biết rằng đoạn văn bản đó là văn bản do AI tạo ra. Điểm số cũng tăng dần, với điểm từ 0.5 đến 1 được gắn cờ là AI tùy thuộc vào bối cảnh trong nội dung tổng thể.
- Tổng hợp và dự đoán: Sau khi tất cả các phân đoạn đã được tính điểm, những điểm số này sẽ được kết hợp hoặc tổng hợp để tạo ra dự đoán về mức độ văn bản có thể được tạo bởi AI. Điểm tổng thể này sau đó được trình bày trong chỉ báo phát hiện AI của Turnitin.
Điều quan trọng cần nhớ là công cụ phát hiện AI của Turnitin được đào tạo trên nhiều mô hình ngôn ngữ khác nhau, giúp công cụ xử lý văn bản được tạo bởi nhiều công cụ AI khác nhau. Ngoài ra, không giống như một số công cụ kiểm tra AI khác, Turnitin được thiết kế để nhận dạng các đặc điểm ngôn ngữ do LLM tạo ra.
Ví dụ: LLM thường tạo ra văn bản có xác suất chọn từ tiếp theo trong câu cao dựa trên các mẫu mà người viết AI đã học được từ dữ liệu đào tạo của nó. Sau đó, bộ phân loại máy dò AI của Turnitin được đào tạo để phân biệt các mẫu này và có thể phân biệt chúng với chữ viết của con người.
Khả năng phát hiện chữ viết AI của Turnitin chính xác đến mức nào?
Một trong những tuyên bố thú vị nhất mà Turnitin đưa ra là mô hình phát hiện văn bản AI của nó có độ chính xác lên tới 98% trong việc xác định văn bản do AI tạo ra. Mặc dù có rất nhiều tổ chức học thuật sử dụng công cụ phát hiện AI của Turnitin nhưng điều quan trọng là phải hiểu rằng không có công cụ phát hiện AI nào có thể đánh lừa được 100%.
Giống như bất kỳ máy dò AI nào, Turnitin vẫn có nguy cơ xảy ra kết quả dương tính giả. Kết quả dương tính giả đề cập đến các trường hợp trong đó trình phát hiện AI phân loại không chính xác chữ viết của con người là nội dung do AI tạo ra. Tất nhiên, điều này có thể khiến học sinh bị buộc tội sai khi sử dụng các công cụ AI để tạo bài tập của mình.
Để tránh sự phức tạp không cần thiết này khi sử dụng trình phát hiện AI, Turnitin nhấn mạnh tầm quan trọng của việc giảm kết quả dương tính giả và thường xuyên tiến hành thử nghiệm. Điều này có nghĩa là đôi khi nó có thể bỏ lỡ văn bản do AI tạo. Tuy nhiên, Turnitin đặt mục tiêu duy trì tỷ lệ dương tính giả dưới 1% đối với các bài tập có hơn 20% nội dung viết bằng AI.
Mặc dù Turnitin là một cách để hợp lý hóa quy trình kiểm tra bài gửi nhưng việc biết độ chính xác của trình phát hiện AI này có thể giúp quá trình chấm điểm của bạn chính xác hơn. Để có kết quả chấm điểm chính xác hơn nữa, bạn cũng có thể sử dụng Máy chấm điểm AI của Smodin để giúp bạn xử lý và chấm điểm nhiều bài nộp hơn trong thời gian ngắn hơn.
Turnitin phát hiện những mô hình viết AI nào?
Khả năng phát hiện văn bản AI của Turnitin được thiết kế đặc biệt để xác định nội dung được tạo bởi các mô hình AI khác nhau. Khi mới ra mắt, Turnitin đã được đào tạo để phát hiện các mô hình như ChatGPT-3 và ChatGPT-3.5 cũng như tất cả các biến thể của chúng. Điều này bao gồm việc nhận dạng nội dung được tạo bởi các mô hình ngôn ngữ AI dựa trên hoặc tương tự với mô hình ChatGPT-3.
Turnitin đã được kiểm tra khả năng tương thích với ChatGPT-4 (đặc biệt là ChatGPT Plus) và tuyên bố có thể phát hiện văn bản AI do mô hình tạo ra trong hầu hết các trường hợp. Tuy nhiên, trình phát hiện AI cần được tinh chỉnh và đánh giá lại để có độ chính xác cao hơn với trình tạo AI này.
Khi AI tiếp tục phát triển, Turnitin đã thừa nhận nhu cầu mở rộng khả năng phát hiện chữ viết AI của mình cho các mô hình AI mới hoặc cập nhật. Điều này có nghĩa là các nhà giáo dục nên lưu ý đến các báo cáo sai có thể xảy ra khi học sinh sử dụng các mô hình ngôn ngữ AI khác hoặc nâng cao hơn.
Nếu bạn muốn sử dụng trình phát hiện AI có thể nhận dạng chính xác văn bản do các mô hình khác tạo ra thì hãy nhớ kiểm tra Trình phát hiện nội dung AI của Smodin.
Tìm hiểu kết quả AI của Turnitin
Một phần của việc sử dụng công cụ phát hiện chữ viết AI của Turnitin là biết cách diễn giải kết quả của nó. Tỷ lệ phần trăm được hiển thị trong chỉ báo phát hiện văn bản AI thường biểu thị lượng văn bản đã gửi được xác định là do các công cụ viết AI tạo ra.
Thông thường, tỷ lệ phần trăm này được dựa trên văn bản ‘đủ tiêu chuẩn’. Điều này liên quan đến các câu văn xuôi được viết theo một hình thức ngữ pháp chuẩn. Tuy nhiên, nó không bao gồm văn bản có thể được viết dưới dạng danh sách hoặc dấu đầu dòng. Vì vậy, khi bạn kiểm tra nội dung gửi, điều quan trọng cần nhớ là không phải tất cả văn bản đều được quét – chỉ văn bản đủ điều kiện mới được quét.
Một yếu tố quan trọng khác cần cân nhắc khi làm việc với công cụ phát hiện AI là nó phải luôn được sử dụng như một công cụ hỗ trợ bổ sung và không nên sử dụng như một cách dứt khoát để chứng minh hoặc bác bỏ việc sử dụng văn bản AI. Vì không có bất kì Máy dò AI có độ chính xác 100%, bạn cũng sẽ cần sử dụng phán đoán của riêng mình để phân tích điểm AI.
Báo cáo về tính tương đồng của Turnitin
Khả năng phát hiện AI của Turnitin đã biến Turnitin trở thành công cụ mạnh mẽ trong việc kiểm tra xem bài tập được gửi trong bối cảnh học thuật có tuân thủ các quy tắc và quy định của tổ chức giáo dục hay không. Tuy nhiên, Turnitin cũng tích hợp công cụ kiểm tra đạo văn.
Vì lý do này, việc hiểu được sự khác biệt giữa điểm AI và điểm Tương tự là rất quan trọng đối với các nhà giáo dục. Nếu không, bạn có thể vô tình buộc tội học sinh sử dụng văn bản do AI tạo khi trên thực tế, bài tập của họ có điểm đạo văn cao hơn – không điểm AI cao.
Báo cáo về sự tương đồng cung cấp cho các nhà giáo dục bản phân tích chi tiết về mức độ giống nhau của bài tập được gửi với các nguồn hiện có (trong cơ sở dữ liệu của Turnitin). Trình kiểm tra đạo văn, cùng với điểm tương tự (được biểu thị bằng phần trăm), nêu bật những điểm tương đồng giữa hai văn bản.
Câu Hỏi Thường Gặp
Trình phát hiện viết AI của Turnitin có gắn cờ diễn giải nội dung không?
Trong một số trường hợp, bài gửi có thể bao gồm nội dung được diễn giải đã được quay bằng cách sử dụng Công cụ xóa phát hiện AI.
Trình phát hiện AI của Turnitin thường có thể phát hiện các trường hợp sử dụng các công cụ này, mặc dù vẫn có khả năng xảy ra kết quả dương tính hoặc âm tính giả tùy thuộc vào mô hình viết AI.
Điều này đặc biệt đúng nếu văn bản chứa sự kết hợp giữa nội dung do AI tạo và nội dung do con người viết.
Tính năng phát hiện văn bản bằng AI của Turnitin khác với phát hiện đạo văn như thế nào?
Tính năng phát hiện AI và kiểm tra đạo văn của Turnitin là hai quy trình riêng biệt trên nền tảng. Trình kiểm tra đạo văn được thiết kế để tìm kiếm các trường hợp văn bản có điểm tương đồng với các bài báo, blog, tài liệu học thuật và nội dung chung đã xuất bản khác. Điều này được thể hiện trong báo cáo tương tự. Điểm tương đồng càng cao thì công cụ tìm thấy càng nhiều điểm tương đồng.
Mặt khác, khả năng phát hiện AI của Turnitin bị giới hạn trong việc tìm kiếm các trường hợp viết AI, trong đó nội dung được phát hiện là được tạo bởi các mô hình ngôn ngữ như ChatGPT. Điều này được thể hiện bằng điểm phần trăm AI.
Turnitin có thể phát hiện nội dung AI bằng các ngôn ngữ khác ngoài tiếng Anh không?
Trình phát hiện AI của Turnitin bị giới hạn trong việc phân tích bài nộp bằng văn bản tiếng Anh. Điều này có nghĩa là các tổ chức chủ yếu nhận bài tiểu luận và bài viết bằng tiếng Anh có thể sử dụng Turnitin để phân tích các tài liệu này nhưng trình kiểm tra sẽ không hoạt động đối với bài nộp bằng các ngôn ngữ khác.
Kết luận:
Turnitin là một công cụ tuyệt vời để duy trì tính trung thực trong học thuật trong bối cảnh nội dung AI phát triển. Với công cụ này được khẳng định có độ chính xác lên tới 98%, nó đã trở thành một công cụ trợ giúp vô giá cho các nhà giáo dục cũng như sinh viên và dường như đang được cải thiện và mở rộng để theo kịp những phát triển trong các công cụ viết AI.
Ngoài tính năng phát hiện AI, nó còn có trình kiểm tra đạo văn tích hợp, tạo ra một công cụ toàn diện giúp giảm nhu cầu sử dụng nhiều công cụ. Đổi lại, điều này giúp việc kiểm tra và đánh giá các tài liệu học thuật trở nên nhanh chóng và dễ dàng hơn bao giờ hết.