AI 비율이 높게 나왔을 때 교수자가 안내받는 대응 절차

Turnitin의 교수자용 안내서는 높은 AI 비율을 판결이 아니라 대화의 출발점으로 다룹니다. 먼저 소속 기관의 정책을 확인하라고 하고, 이 도구의 목적은 처벌이 아니라 대화를 이끌어 내는 데 있다고 밝히며, 대화를 열 때 쓸 수 있는 문장 네 개를 제시합니다. 그중 하나는 보고서를 함께 열어 강조 표시된 부분을 하나씩 짚어 보자는 제안입니다. 부정행위 여부에 대한 최종 판단은 도구가 아니라 교수자에게 있다는 점도 분명히 적어 두었습니다.

두 페이지는 모두 Turnitin 가이드의 AI writing 섹션에 기술 문서와 나란히 올라와 있습니다. 하나의 제목은 "What should I do if the AI writing percentage is high?" (AI 작성 비율이 높게 나왔다면 어떻게 해야 하나요?)이고, 다른 하나는 "What questions do I ask my student if AI is detected?" (AI가 탐지됐다면 학생에게 어떤 질문을 해야 하나요?)입니다.

둘을 합쳐도 사천 자가 되지 않습니다. 로그인을 해야 볼 수 있는 것도 아닙니다. 그리고 이 페이지가 존재한다는 사실 자체가 하나의 정보입니다. 업체는 대화를 점수와 별개의 문제로 생각해 왔고, 대화를 위한 짧은 대본까지 마련해 둔 셈입니다.

이것이 여러분에게 중요한 까닭은 두 가지입니다. 결과가 실제로 정해지는 자리가 바로 그 대화이고, 그 대화가 어떤 구조로 설계되어 있는지 알고 들어갈 수 있기 때문입니다.

순서를 그 페이지의 표현 그대로 옮기면 이렇습니다. 먼저 "refer to your institution's policy on plagiarism and the use of generative AI in the classroom." (표절과 교실 내 생성형 AI 사용에 관한 소속 기관의 정책을 참고하세요.) 그다음은 "you'll need a plan for approaching AI-generated text in your classroom." (교실에서 AI가 생성한 텍스트를 다룰 계획이 필요합니다.)입니다.

그리고 이어지는 문장이야말로 원문 그대로 알아 둘 만합니다:

"Rather than viewing the results of our AI writing detection as a punitive measure, the overarching purpose of the tool is to facilitate student conversations and interventions on the use of AI writing tools that may not otherwise occur, and use it as one strategy in your toolkit." (저희 AI 작성 탐지 결과를 징벌적 조치로 보기보다는, 이 도구의 궁극적인 목적을 학생과의 대화와 AI 작성 도구 사용에 대한 개입을 이끌어 내는 데 두셔야 합니다. 그런 대화는 다른 방식으로는 이루어지지 않을 수 있으며, 이 도구는 여러분의 도구 상자에 담긴 여러 전략 가운데 하나로 활용하시기 바랍니다.)

도구 상자 속 전략 하나일 뿐, 조사 결과가 아닙니다.

이 페이지는 결정권이 어디에 있는지 분명히 못 박으며 끝납니다: "The final decision on whether any misconduct has occurred rests with the reviewer/instructor. Turnitin does not make a determination of misconduct, rather it provides data for the educators to make an informed decision based on their academic and institutional policies." (부정행위가 있었는지에 대한 최종 결정은 검토자 또는 교수자에게 있습니다. Turnitin은 부정행위 여부를 판단하지 않으며, 교육자가 학술적 정책과 기관 정책에 근거해 스스로 판단할 수 있도록 데이터를 제공할 뿐입니다.)

여기서 실질적인 결론이 두 가지 나옵니다. 소속 기관의 정책이 숫자보다 우선하므로, 그 정책을 찾아 읽어 두는 일은 선택이 아니라 준비입니다. 그리고 업체를 포함해 이 과정에 관여하는 그 누구도 그 비율이 그 자체로 무엇을 결정한다고 말하지 않습니다.

두 번째 페이지는 스스로를 "conversation jump starters" (대화를 시작하는 문구)라고 소개하며, "a collaborative conversation with a student regarding potential AI misuse" (AI 오용 가능성이 있는 학생과 나누는 협력적 대화)를 위해 마련된 것이라고 밝힙니다. 그리고 교수자에게 각자의 상황에 맞게 바꿔 쓰라고 안내합니다. 네 문장을 원문 그대로 옮기면 다음과 같습니다:

1. "When we look at your assignment, we can see [errors, apparent instances of AI misuse, etc.] in these places. Let's work together to find ways to avoid this/improve it in the future." (과제물을 살펴보니 이런 지점들에서 [오류, AI 오용으로 보이는 사례 등]이 확인됩니다. 앞으로 이를 피하거나 개선할 방법을 함께 찾아봅시다.)
2. "Explain your process for completing this assignment. Let's look at areas that you are proud of and areas that you think could use some extra improvement." (이 과제를 완성하기까지의 과정을 설명해 보세요. 스스로 잘했다고 생각하는 부분과 조금 더 보완했으면 하는 부분을 함께 살펴봅시다.)
3. "Let's examine your Turnitin AI writing detection report together. Let's look at the highlighted areas and discuss your choices. Let's brainstorm how to revise these sections of text in order to make the writing more authentically your own." (Turnitin AI 작성 탐지 보고서를 함께 살펴봅시다. 강조 표시된 부분을 함께 살펴보고 어떤 선택을 했는지 이야기해 봅시다. 이 글을 여러분의 것으로 더 온전히 만들기 위해 해당 문단을 어떻게 고칠지 함께 생각해 봅시다.)
4. "What processes have worked well for you in your other classes? How can we consider implementing similar strategies in this class in order to optimize your work?" (다른 수업에서 효과가 있었던 방식은 무엇인가요? 여러분의 과제를 더 잘 만들기 위해 비슷한 전략을 이 수업에도 적용할 방법을 함께 고민해 볼 수 있을까요?)

네 문장을 묶어서 읽으면 패턴이 뚜렷합니다. AI를 썼는지 묻는 문장은 하나도 없습니다. 두 문장은 여러분의 작성 과정을 묻고, 한 문장은 보고서를 함께 열어 보자고 제안하며, 한 문장은 다른 수업에서의 습관을 묻습니다.

두 번째 질문이 "과정을 설명해 보라"는 것이라면, 준비해 가야 할 것은 그 과정입니다. 숫자를 방어할 논리가 아닙니다.

구체적으로, 만남 전에 준비할 것은 다음과 같습니다:

1. 문서가 어떤 과정을 거쳐 만들어졌는지 설명할 수 있어야 합니다. 언제 시작했는지, 어떤 순서로 썼는지, 무엇을 덜어냈는지, 무엇을 읽고 있었는지입니다. 이는 증거가 아니라 평범한 기억이며, 두 번째 질문이 요구하는 것이 바로 이것입니다.
2. 초고 기록이 있다면 바로 꺼낼 수 있게 준비하세요. 같은 질문에 날짜를 붙여 답해 주는 자료이고, 어디에서 찾을 수 있는지는 버전 기록을 증거로 활용하는 법에서 다룹니다.
3. 보고서를 받았다면 만남 전에 미리 읽어 두세요. 세 번째 문장이 보고서를 함께 훑어보자고 제안하고 있으므로, 그 자리에서 처음 읽는 일은 피하고 싶을 것입니다. 각 항목이 무엇을 뜻하는지는 Turnitin AI 작성 보고서 읽는 법에서 하나씩 짚어 드립니다.
4. 소속 기관의 실제 정책을 찾아보세요. 업체가 교수자에게 가장 먼저 하라고 한 일도 그 정책을 확인하는 것이고, 정책 차이가 워낙 커서 같은 비율이라도 기관에 따라 뜻이 달라집니다.
5. 총점이 아니라, 강조 표시된 개별 문단에 대해 할 말을 준비하세요. 이 대화는 바로 그 단위를 중심에 두고 설계되어 있습니다.

위 내용의 한계도 솔직하게 짚어 두겠습니다. 과도하게 읽어 내는 것 역시 그 자체로 하나의 실수가 될 수 있으니까요.

이것은 소속 기관이 합의한 절차가 아니라, 짧은 고객 지원 페이지 두 개일 뿐입니다. 담당 교수자는 이 페이지를 한 번도 읽지 않았을 수 있습니다. 기관의 학술 진실성 절차가 첫 이메일부터 공식적으로 굴러가는 곳도 있고, 그런 경우에는 앞서 본 협력적 구도가 적용되지 않습니다.

또한 이 가운데 어느 것도 방어 논리가 되지는 못합니다. "업체도 이건 대화를 위한 것이라고 했다"는 말은 업체 문서에 관한 한 옳은 진술이지만, 회의 자리에서 입 밖으로 내기에는 힘이 약한 주장입니다. 여러분의 과제가 아니라 절차를 두고 다투는 말이 되기 때문입니다.

이미 정식 절차가 시작된 상황, 즉 혐의 제기나 심사 위원회나 서면 답변서가 오간 경우라면 문제의 성격 자체가 달라집니다. 그 자리에서 실제로 검토자를 움직였던 것들은 플래그가 붙었지만 직접 쓴 글에 정리해 두었습니다.

세 번째 시작 문구로 돌아가 보겠습니다: "Let's look at the highlighted areas and discuss your choices." (강조 표시된 부분을 함께 살펴보고 어떤 선택을 했는지 이야기해 봅시다.)

강조 표시된 부분이지, 비율이 아닙니다. 업체가 설계한 대화에서 논의의 단위는 문단이고, 각 문단에 대해 던지는 질문은 거기서 어떤 선택을 했느냐입니다.

남보다 먼저 여러분의 보고서를 살펴볼 때도 이 관점이 가장 쓸모가 있습니다. 비율은 여러분이 답할 수 있는 대상이 아니지만, 특정 문단은 그렇습니다.

때로는 "discuss your choices" (어떤 선택을 했는지 이야기해 봅시다)라는 질문에 대한 답이, 그 문단은 정말로 다시 써야 한다는 것일 수 있습니다. 그때 다음 문제는 그 문단 때문에 문서 전체가 얼마나 함께 바뀌느냐입니다.

HumanPen은 보고서 자체를 경계로 삼아 그 범위를 좁힙니다. 파일과 보고서를 함께 넘기면 편집되는 곳은 강조 표시된 문단뿐이고, 아무도 표시하지 않은 문단은 여러분이 이미 소명한 표현 그대로 남습니다.

하지만 대화 자체에는 보탬이 되지 못합니다. 그 부분은 여러분의 몫이고, 위에 정리한 내용이 저희가 여러분께 드릴 수 있는 전부입니다.

AI 비율이 높게 나왔다는 것이 곧 무언가의 혐의를 받았다는 뜻인가요? 그 자체로는 아닙니다. Turnitin의 교수자용 안내서는 부정행위가 있었는지에 대한 최종 결정이 검토자 또는 교수자에게 있고, 이 도구는 판단이 아니라 데이터를 제공한다고 밝히고 있습니다.

교수자는 가장 먼저 무엇을 물어볼까요? Turnitin이 제안한 도입 문장들은 과정에 초점을 둡니다. 과제를 어떻게 완성했는지, 어느 부분이 스스로 자랑스러운지, 그리고 보고서에서 강조 표시된 부분을 함께 살펴보자는 내용입니다.

Turnitin의 안내를 교수자에게 그대로 인용해도 될까요? 하지 않는 편이 좋습니다. 틀린 말은 아니지만, 여러분의 과제가 아니라 회의 진행 방식을 두고 다투는 셈이 되는데, 그 회의의 목적은 여러분의 과제이기 때문입니다.

소속 기관도 이 안내를 따라야 하나요? 그렇지 않습니다. 이 문서는 업체가 교수자용으로 만들어 둔 도움말 페이지일 뿐입니다. Turnitin이 가장 먼저 내린 지시 자체가 소속 기관의 정책을 확인하라는 것이고, 실제로 절차를 규정하는 문서는 그 정책입니다.