AI 의혹 이후 열리는 학업 진정성 회의

담당 교수와의 첫 대화로는 해결되지 않았고, 이제는 공식 회의가 잡혔습니다. 여기서는 Turnitin 문서에 실제로 적혀 있는 내용, 가져가야 할 증거, 그리고 제공 업체가 스스로 한 말을 변론에 어떻게 활용할 수 있는지 다룹니다.

HumanPen 팀

· 7분

짧은 답

공식적인 학업 진정성 회의는 Turnitin 비율만으로 결정되지 않습니다. Turnitin 자체 FAQ는 AI 작성 탐지 비율에 대해 "should not be used as the sole basis for action." (조치를 위한 유일한 근거로 사용되어서는 안 됩니다.)라고 밝히고 있습니다. 회의에서 귀하가 할 일은 작성 과정의 증거를 가져오는 것, 그리고 문서 자체가 숫자가 아니라 사람의 판단을 요구한다는 점을 지적하는 것입니다. 점수가 `*%`로 표시된다면 이는 20% 미만이며 강조 표시가 전혀 생성되지 않았습니다. 담당 교수가 AI 보고서 PDF를 공유하지 않았다면 회의 전에 요청하셔도 됩니다. 가져갈 수 있는 가장 강력한 자료는 초안 이력, 리서치 노트, 그리고 점수가 확정적인 답이 아니라고 밝힌 Turnitin FAQ 페이지의 인쇄본입니다.

Turnitin 문서는 AI 점수에 대해 무엇이라고 밝히고 있는가

회의에서 가장 중요한 문장은 Turnitin의 AI 작성 탐지 기능 FAQ에 있습니다. 보고서 가이드는 이렇게 밝힙니다.

"Our AI writing detection model may not always be accurate (it may misidentify human-written, AI-generated, and AI-paraphrased text), so it should not be used as the sole basis for adverse actions against a student." (당사의 AI 작성 탐지 모델이 항상 정확한 것은 아닙니다. 사람이 쓴 텍스트, AI가 생성한 텍스트, AI가 다시 쓴 텍스트를 잘못 판별할 수 있으므로, 학생에게 불리한 조치의 유일한 근거로 사용되어서는 안 됩니다.)

FAQ는 공식 청문에 직접 관련된 문장으로 이어집니다.

"It takes further scrutiny and human judgment in conjunction with an organization's application of its specific academic policies to determine whether academic misconduct has occurred." (학업 부정행위가 있었는지 판단하려면 기관이 자체 학업 정책을 적용하는 것과 함께, 추가적인 검토와 사람의 판단이 필요합니다.)

"further scrutiny and human judgment" (추가적인 검토와 사람의 판단)이라는 표현이 출발점입니다. 청문은 기관의 학업 정책을 사안의 사실에 적용하는 자리여야 합니다. 보고서의 숫자는 정책이 아닙니다. Turnitin 자체 문서가 그렇게 밝히고 있습니다. 같은 FAQ는 다음과 같이도 밝힙니다.

"Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (따라서 AI 작성 지표의 백분율은 조치의 유일한 근거로, 또는 교수가 사용하는 확정적 채점 기준으로 사용되어서는 안 된다는 점을 반드시 강조해야 합니다.)

그 페이지를 인쇄하십시오. 그리고 가져가십시오. 심의위원회가 그 비율을 증거로 취급한다면, 제공 업체가 그래서는 안 된다고 밝힌 문장을 지적하십시오.

점수는 "single data point" (단일 데이터 포인트)이며, 판결이 아닙니다

같은 점을 뒷받침하는 Turnitin 페이지가 하나 더 있고, 회의에서 인용할 가치가 있습니다. AI Writing report는 어떻게 검토해야 하나요? 가이드에서 가져온 내용입니다.

"It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy." (이 보고서가 단독으로 확정적인 답을 제공하기 위한 것은 아닙니다. 어떤 도구보다 중요한 것은 점수를 보고, 그 정보를 학생과 학생의 과제, 그리고 기관 정책에 대한 개인적 지식과 균형 있게 저울질하여 판단하는 교육자입니다.)

그 페이지의 다음 문장은 이렇습니다.

"When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended." (교육자가 AI 작성 점수를 확인하고 그것을 확정적인 답이 아닌 단일 데이터 포인트로 활용할 때, 그것은 의도된 대로 사용되고 있는 것입니다.)

Turnitin은 점수를 "single data point" (단일 데이터 포인트)라고 부릅니다. 이 표현은 청문에서 유용합니다. 백분율을 판단이 아닌 여러 정보 중 하나로 자리매김하기 때문입니다. 귀하의 작성 과정, 초안, 리서치 노트, 그리고 과목에 대한 이해도 모두 데이터 포인트입니다. 문서는 교육자가 점수를 "their personal knowledge of their students, their work." (학생과 학생의 과제에 대한 개인적 지식.)과 균형 있게 저울질해야 한다고 밝힙니다. 귀하의 증거는 심의위원회가 그렇게 하는 데 도움이 됩니다. AI 비율이 높을 때 귀하의 담당 교수가 무엇을 하도록 안내받는지 미리 알아 두실 가치가 있습니다. 심의위원회도 같은 안내를 근거로 움직이기 때문입니다.

보고서를 직접 보지 못했을 수도 있습니다

준비와 관련된 구조적인 부분이 하나 있습니다. FAQ는 이렇게 밝힙니다.

"Please note, only instructors and administrators are able to see the indicator." (참고로, 이 지표는 교수와 관리자만 볼 수 있습니다.)

그리고 같은 페이지에는 이렇게 나와 있습니다.

"The AI writing detection indicator and report are not visible to students." (AI 작성 탐지 지표와 보고서는 학생에게 표시되지 않습니다.)

다음 문장은 이렇습니다.

"However, with the PDF download feature, instructors can download and share the AI report with students." (다만 PDF 내려받기 기능을 사용하면 교수가 AI 보고서를 내려받아 학생과 공유할 수 있습니다.)

같은 FAQ는 다음과 같이도 밝힙니다.

"While Turnitin has confidence in its model, Turnitin does not make a determination of misconduct; rather, it provides data for the educators to make an informed decision based on their academic and institutional policies." (Turnitin은 자사 모델을 신뢰하지만, 부정행위 여부를 판정하지는 않습니다. 오히려 교육자가 학업 및 기관 정책에 근거해 충분한 정보를 바탕으로 판단할 수 있도록 데이터를 제공합니다.)

보고서를 보지 못했다면 회의 전에 PDF를 요청하십시오. 읽지 않은 강조 표시에 대해 방어를 준비할 수는 없습니다. 담당 교수가 PDF를 공유했다면, 어느 부분이 강조 표시되었고 어느 부분이 그렇지 않은지 살펴보십시오. 심의위원회가 질문할 부분은 강조 표시된 부분입니다. 귀하의 증거는 바로 그 부분을 다루고 있어야 합니다.

\*%의 의미와 그것이 귀하의 사안에 중요한 이유

보고서에 숫자 대신 `*%`가 표시된다면 점수는 20% 미만입니다. FAQ는 이렇게 설명합니다.

"To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (*%) and no percentage is attributed." (오탐지가 발생할 가능성을 피하기 위해, AI 탐지 점수가 1%에서 19% 범위인 경우에는 점수나 강조 표시가 부여되지 않습니다. 보고서에서 AI가 20% 기준값 미만으로 탐지되면, 이제는 별표 (*%)로 표시되고 백분율은 부여되지 않습니다.)

즉 보고서에는 강조 표시가 존재하지 않습니다. 모델이 어떤 부분도 지적하지 않았으므로 구체적으로 방어할 대상이 없습니다. 청문이 `*%` 점수를 근거로 진행된다면, 20% 미만 점수는 오탐지 위험이 너무 커서 표시하지 않기로 Turnitin 스스로 정했다는 점을 지적하실 수 있습니다. Turnitin이 백분율을 부여하지 않고 텍스트도 강조하지 않는다면, 심의위원회는 그 별표를 백분율로 취급해서는 안 됩니다. Turnitin AI 점수에서 별표 (*%)가 의미하는 것은 별도로 다루었습니다.

오탐지의 특징: 점수를 낮게 봐야 하는 경우

Turnitin은 특정 유형의 글이 오탐지를 만들어 낸다는 점을 인정합니다. FAQ는 이렇게 밝힙니다.

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (때때로 오탐지, 즉 사람이 쓴 텍스트를 AI가 생성한 것으로 잘못 표시하는 경우에는 구조적 변화가 거의 없는 내용, 말 그대로 반복되는 텍스트, 또는 새로운 생각을 전개하지 않고 바꿔 쓴 텍스트가 포함될 수 있습니다.)

다음 문장이 청문에서 인용해야 할 문장입니다.

"If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (그런 텍스트에서 당사 지표가 더 많은 양의 AI 작성을 보여 준다면, 표시된 백분율을 볼 때 그 점을 고려하시기를 권합니다.)

Turnitin은 텍스트의 구조적 변화가 적거나 반복이 있거나 새로운 생각 없이 바꿔 쓴 경우, 점수를 낮게 보라고 독자에게 권고합니다. 과제가 문헌 검토, 방법론 섹션, 또는 비슷한 표현이 자연스럽게 되풀이되는 글이었다면 그 부분의 점수는 의심의 눈초리로 봐야 합니다. 문서가 그렇게 밝히고 있습니다. Turnitin이 오탐지에 취약하다고 지적하는 구조적 특징을 보여 주는 초안 사례를 가져가십시오. 지적된 부분이 Turnitin 스스로 경고하는 범주에 들어간다는 점을 심의위원회에 보여 주십시오.

회의에 가져갈 것

문서는 주장을 제공합니다. 증거는 사실을 제공합니다. 가져갈 것은 다음과 같습니다.

초안 이력. Google Docs, Word, Overleaf의 버전 이력입니다. Word, Google Docs, Overleaf에서 버전 이력을 남기는 방법에서는 필요해지기 전에 켜 두는 방법을 다룹니다. 문서가 시간을 두고 만들어졌다는 점을 보여 주십시오. 한 번의 작업으로 만들어 제출한 문서와 며칠 또는 몇 주에 걸친 수정이 남아 있는 문서는 다르게 보입니다. 타임스탬프가 중요합니다.

리서치 노트. 주석이 달린 참고문헌 목록, 독서 노트, 개요를 가져가십시오. 이것들은 생각이 어디에서 나왔는지 보여 줍니다. AI가 생성한 텍스트에는 대체로 추적 가능한 조사 흔적이 없습니다. 귀하의 노트가 바로 그 흔적입니다.

AI 보고서 PDF. 담당 교수가 공유했다면 인쇄본을 가져가십시오. 보고서가 지적한 부분을 강조 표시하십시오. 각각에 대한 설명을 준비하십시오. 지적된 부분이 표현이 반복되는 방법론 섹션이라면, 위에서 언급한 오탐지 관련 안내를 가리키십시오.

Turnitin FAQ 페이지. 인쇄본에 핵심 문장을 강조 표시해 두십시오. 심의위원회가 봐야 하는 문장은 "sole basis" (유일한 근거), "human judgment" (사람의 판단), "single data point" (단일 데이터 포인트)에 관한 것들입니다. 이것들은 의견이 아닙니다. 제공 업체 자체 문서입니다.

서면 진술서. 귀하의 입장을 한 페이지로 요약한 것을 준비하십시오. 회의가 뜻대로 흘러가지 않아 정식 이의 절차로 이어진다면, 다음으로 읽을 것은 귀하의 대학이 받아들이는 증거입니다. FAQ의 해당 문장을 구체적으로 인용하십시오. 지적된 부분 중 어느 것이 오탐지 범주에 들어가는지 밝혀 두십시오. 논문을 직접 작성했으며 초안 이력이 그 주장을 뒷받침한다는 점을 밝히십시오.

실제로 해야 할 일

회의를 위한 점검 목록:

  1. 보고서를 보지 못했다면 회의 전에 AI 보고서 PDF를 요청하십시오. 요청하셔도 됩니다. FAQ에는 교수가 공유할 수 있다고 나와 있습니다.
  2. Turnitin FAQ 페이지를 인쇄하십시오. 점수가 조치의 유일한 근거가 되어서는 안 되며, 부정행위를 판정하려면 사람의 판단이 필요하다고 밝힌 문장에 강조 표시를 하십시오.
  3. 타임스탬프가 있는 초안 이력을 가져가십시오. 논문이 한 번의 작업이 아니라 시간을 두고 작성되었다는 점을 보여 주십시오.
  4. 귀하의 점수가 `*%`라면, 그것이 20% 미만이고 어느 부분도 강조 표시되지 않았다는 점을 지적하십시오. Turnitin은 이 점수가 오탐지 위험이 너무 커서 표시하지 않기로 정했습니다.
  5. 특정 부분이 지적되었다면 구조적 변화가 적은지, 반복이 있는지, 바꿔 쓴 부분이 있는지 확인하십시오. FAQ는 그런 텍스트의 점수는 낮게 보라고 밝힙니다.
  6. 서면 진술서를 준비하십시오. 제공 업체의 문서를 인용하십시오. 어떤 증거가 어떤 주장을 뒷받침하는지 구체적으로 밝히십시오.

보고서의 백분율은 하나의 데이터 포인트입니다. 문서가 그렇게 밝히고 있습니다. 심의위원회가 그렇게 다루게 만드는 것이 귀하의 과제입니다.

계속 읽기