제퍼넷 로고

문법 검사기를 사용하면 AI 감지 소프트웨어를 시작할 수 있나요? – EdSurge 뉴스

시간

말리 스티븐스 게시됨 틱톡에 올라온 영상 지난 학기에 그녀는 대학생들에게 공익 광고로 묘사했습니다. 그녀의 메시지: 교수가 AI 감지 시스템을 통해 논문을 실행할 수 있다면 문법 검사 소프트웨어를 사용하지 마세요.

스티븐스(Stevens)는 노스 조지아 대학교(University of North Georgia)의 3학년생으로, 자신이 "대실패"라고 부르는 것에 대해 이례적으로 공개적으로 밝혔습니다. 그녀는 표준 문법을 사용하지 않고 자신이 작성한 논문을 작성하기 위해 AI를 사용했다는 비난을 받았습니다. 웹 브라우저에 확장 프로그램으로 설치한 Grammarly의 맞춤법 검사 기능도 있습니다.

그녀가 게시한 초기 경고 동영상은 5.5만 회 이상 조회되었으며 이후 그녀는 자신에게 보낸 이메일 사진 공유를 포함하여 팔로어의 댓글에 답변하고 문제에 대해 대학과의 싸움을 기록한 25개 이상의 후속 동영상을 만들었습니다. 학장과 학생 작업 이미지를 통해 자신의 주장을 입증하려고 노력합니다. 대학에서 점점 더 승인을 받고 교수가 사용하는 잘못된 AI 탐지 도구에 대한 인식을 높이기 위해 노력합니다.

Stevens는 작년에 자신이 수강한 형사 사법 과정의 한 교수가 Turnitin의 AI 감지 시스템에서 로봇이 작성한 것으로 표시했다고 말했기 때문에 논문에 0점을 줬다고 말합니다. Stevens는 이 작업이 전적으로 자신의 것이며 논문의 어떤 부분도 작성하기 위해 ChatGPT나 다른 챗봇을 사용하지 않았다고 주장합니다.

@m.stevens03 #그래머리 #일체 포함 #artentalintelligence #fyp #psa ♬ 오리지널 사운드 – 말리 스티븐스

그녀는 종이에 0점을 받은 결과, 수업의 최종 성적이 너무 낮아서 자격증을 취득할 수 없게 되었다고 말합니다. 희망 장학금, 이는 학생들이 3.0 GPA를 유지하도록 요구합니다. 그리고 그녀는 대학이 학업 부정 행위에 대한 정책을 위반했다는 이유로 그녀에게 학업 보호 관찰을 선고했으며 부정 행위에 관한 세미나에 참석하기 위해 105달러를 지불해야 한다고 말했습니다.

대학은 AI 감지 사용에 대한 정책에 대해 이야기해 달라는 EdSurge의 반복적인 요청을 거부했습니다. 대신 관계자들은 연방 학생 개인 정보 보호법에 따라 개별 부정 행위 사건에 대해 논평하는 것이 금지되어 있으며 다음과 같은 성명을 보냈습니다. “우리 교수진은 다양한 수업에서 AI 사용에 관한 구체적인 지침을 전달하며 해당 지침은 수업 계획서에 포함되어 있습니다. AI의 부적절한 사용은 우리의 보고서에서도 다뤄집니다. 학생 행동 강령. "

해당 학생 행동 강령 섹션에서는 표절을 다음과 같이 정의합니다. “출처를 밝히지 않고 다른 사람이나 기관(인공 지능 포함)의 아이디어나 표현을 사용하는 것. 테마, 에세이, 학기 논문, 시험 및 기타 유사한 요구 사항은 이를 제출하는 학생의 작품이어야 합니다. 직접인용이나 의역을 사용할 경우에는 이를 명시하고, 타인의 생각이 논문에 포함될 경우에는 이를 적절히 인정하여야 한다. 학생의 모든 작업은 강사의 요구 사항에 따라 독창적이거나 인용되어야 하며, 그렇지 않으면 표절로 간주됩니다. 표절에는 다른 사람의 출판되거나 출판되지 않은 저작물을 완전하고 명확한 승인 없이 의역이나 직접적인 인용을 통해 사용하는 것이 포함되지만 이에 국한되지는 않습니다. 또한 기말 보고서나 기타 학술 자료를 판매하기 위해 다른 사람이나 기관이 준비한 자료를 승인 없이 사용하는 것도 포함됩니다.”

이 사건은 새로운 AI 도구와 관련하여 어디에 선을 그어야 하는지에 대한 복잡한 질문을 제기합니다. 단지 허용 가능한 방식으로 도움을 주는 경우는 언제이며, 이러한 사용이 학문적 위법 행위를 의미하는 경우는 언제입니까? 결국 많은 사람들이 Google 문서도구 및 사용자가 입력할 때 단어나 구문을 제안하는 기타 프로그램과 같은 시스템에서 문법 및 철자 자동 수정 기능을 사용합니다. 그게 부정행위인가요?

그리고 생성 AI 도구가 더욱 주류가 되면서 이러한 문법 기능이 더욱 강력해짐에 따라 AI 탐지 도구가 허용 가능한 AI 사용과 부정 행위의 차이를 구분할 수 있을까요?

"저는 같은 대학교의 다른 선생님들로부터 논문에 [Grammarly]를 사용하라고 권유받았습니다."라고 Stevens는 말했습니다. 다른 동영상. “그럼 자동 수정이나 맞춤법 검사기 등을 사용할 수 없다는 뜻인가요? 그들은 우리가 무엇을 하기를 원합니까? 예를 들어 Notes 앱에 입력하고 그런 식으로 바꾸나요?”

EdSurge와의 인터뷰에서 학생은 다음과 같이 말했습니다.

“내 생각은 AI 감지기가 쓰레기이고 학생으로서 우리가 할 수 있는 일이 별로 없다는 것입니다.”라고 그녀는 말합니다. "그리고 우리는 대학에 가기 위해 이 모든 일을 하고 이 모든 돈을 지불하기 때문에 그것은 불공평합니다. 그러면 AI 탐지기가 여러분의 대학 경력 전체를 망칠 수 있습니다."

우여곡절

그 과정에서 이 노스 조지아 대학교 학생의 이야기는 놀라운 변화를 겪었습니다.

우선, 스티븐스가 처음으로 바이럴 동영상을 게시한 지 얼마 지나지 않아 대학에서는 모든 학생들에게 AI에 대한 이메일을 발송했습니다.

해당 이메일은 학생들에게 대학의 학업 행동 강령을 준수할 것을 상기시켰으며 다음과 같은 특이한 경고도 포함했습니다. “학생들의 문법, 구두점, 문장 구조 등을 지원하는 데 사용되는 일부 온라인 도구는 생성 인공 지능(AI)을 활용한다는 점에 유의하십시오. ); Turnitin에서 플래그를 지정할 수 있습니다. Turnitin.com이 표시하는 가장 일반적으로 사용되는 생성 AI 웹 사이트 중 하나는 Grammarly입니다. 이러한 웹사이트를 고려할 때 주의하시기 바랍니다.”

교수는 나중에 학생에게 다른 도구인 Copyleaks를 사용하여 그녀의 논문도 확인했으며 그녀의 논문도 봇 작성으로 표시되었다고 말했습니다. 그리고 그녀는 최근 Copyleaks를 통해 자신의 논문을 검토했을 때 인간이 쓴 작품으로 간주되었다고 말했습니다. 그녀는 이 기자에게 도구가 녹색 텍스트로 "이것은 인간의 텍스트입니다."라고 결론짓는 프로세스의 스크린샷을 보냈습니다.

그녀는 AI 탐지기에 대해 “지금 실행하여 다른 결과를 얻는다면 이는 이러한 것들이 항상 정확하지는 않다는 것을 보여주는 것입니다.”라고 말합니다.

Copyleaks 관계자는 논평 요청에 응답하지 않았습니다. Stevens는 자신의 논문 전문 공유를 거부했으며, 다른 학생들이 논문을 복사하여 자신이 대학에 더 큰 문제를 일으킬 수 있는 인터넷에 논문이 퍼지는 것을 원하지 않는다고 설명했습니다. “저는 이미 학사 보호 관찰을 받고 있습니다.”라고 그녀는 말합니다.

스티븐스는 전국의 학생들로부터 AI 탐지 소프트웨어로 인해 부정행위를 했다는 거짓 고발을 당했다는 이야기를 들었다고 말했습니다.

“한 학생이 의사가 되고 싶다고 말했지만 고발을 당했고, 그 후 학교 중 누구도 그녀의 위법 행위 때문에 그녀를 받아들이지 않았습니다.”라고 Stevens는 말합니다.

Stevens는 자신의 동영상을 시청하는 사람들로부터 받은 지원의 양에 놀랐다고 말합니다. 그녀의 소셜 미디어 팔로워들은 그녀에게 GoFundMe 캠페인, 그녀는 장학금 손실을 보상하고 잠재적으로 대학을 상대로 법적 조치를 취할 변호사 비용을 지불하기 위해 그렇게 했습니다. 지금까지 그녀는 6,100명 이상의 사람들로부터 90달러 이상을 모금했습니다.

그녀는 또한 그녀의 GoFundMe에 4,000달러를 기부하고 그녀를 학생 홍보대사로 고용한 Grammarly의 관계자로부터 연락을 받고 놀랐습니다. 결과적으로 Stevens는 이제 Grammarly를 위한 XNUMX개의 홍보 동영상을 제작할 계획이며, 각 동영상에 대해 소액의 수수료를 받게 됩니다.

Stevens는 “이 시점에서 우리는 대학들이 AI 정책을 재고하도록 함께 노력하고 있습니다.”라고 말했습니다.

Grammarly의 경우 목표는 Stevens의 첫 번째 비디오에서 "논문, 에세이, 토론 게시물 등 TurnItIn에 제출되는 모든 항목이 있는 경우 지금 당장 Grammarly를 제거하세요"라고 말한 내용을 바꾸는 것임이 분명해 보입니다. .”

Grammarly의 교육 책임자인 Jenny Maxwell은 AI 탐지기가 얼마나 부정확한지에 대한 메시지를 널리 알리고 싶다고 말합니다.

“교직원 수준의 많은 기관에서는 이러한 AI 감지 서비스가 얼마나 자주 잘못되었는지 인식하지 못합니다.”라고 그녀는 말합니다. "우리는 이러한 AI 탐지기를 단일 진실 소스로 사용하는 것이 얼마나 위험한지 기관이 인식하도록 하고 싶습니다."

이런 결함이 생겼습니다 잘 기록 된, 몇몇 연구자들은 교수들이 이 도구를 사용해서는 안 된다고 말했습니다. Turnitin조차도 자사의 AI 탐지 도구가 다음과 같다고 공개적으로 밝혔습니다. 항상 신뢰할 수 있는 것은 아니다.

Turnitin의 최고 제품 책임자인 Annie Chechitelli는 회사의 테스트에 따르면 자사의 AI 탐지 도구의 오탐률이 약 1%였으며 이를 최대한 낮추기 위해 노력하고 있다고 말했습니다.

“우리는 아마도 [봇이 작성한 텍스트의] 약 15%를 플래그를 지정하지 않고 그대로 두었습니다.”라고 그녀는 말합니다. "우리는 오탐률을 높이기보다는 정확도를 낮추는 편이 낫습니다."

Chechitelli는 교육자들이 Turnitin의 감지 시스템을 학생 작업의 학문적 무결성에 대한 최종 판결이 아니라 학생과의 대화를 위한 출발점으로 사용해야 한다고 강조합니다. 그리고 그녀는 그것이 표절 탐지 시스템에 대한 회사의 조언이기도 하다고 말했습니다.

“우리는 이것이 학생이 부정행위를 했다는 증거가 아니라는 점을 교사들에게 교육시켜야 했습니다.”라고 그녀는 말합니다. “우리는 항상 선생님이 결정을 내려야 한다고 말해왔습니다.”

하지만 AI는 교육자들을 대화에서 더욱 어려운 위치에 놓이게 한다고 Chechitelli는 인정합니다. Turnitin의 도구가 표절을 감지하는 경우 시스템은 학생이 복사했을 수 있는 원본 자료를 가리킵니다. AI 탐지의 경우, ChatGPT와 같은 도구는 사용자가 프롬프트를 입력할 때마다 다른 답변을 내뱉기 때문에 살펴볼 명확한 소스 자료가 없으므로 봇이 소스임을 증명하기가 훨씬 어렵습니다.

Turnitin 관계자는 회사 내부 테스트에서 전통적인 문법 검사 도구가 경보를 울리지 않는다고 말했습니다.

Grammarly의 Maxwell은 AI 탐지 시스템이 98%의 확률로 정확하더라도 논문의 2%에 오류가 있다는 의미라고 지적합니다. 그리고 한 대학에서 매년 50,000개의 학생 논문이 제출될 수 있기 때문에 모든 교수가 AI 감지 시스템을 사용한다면 1,000개의 논문이 부정행위로 허위로 처리될 수 있다는 의미입니다.

Maxwell은 대학이 자신의 제품 사용을 방해할 수 있다고 걱정합니까? 결국 University of North Georgia는 최근 Stevens의 TikTok 비디오가 입소문을 낸 후 추천 리소스 목록에서 Grammarly를 삭제했지만 나중에 다시 추가했습니다.

Maxwell은 "우리는 University of North Georgia를 만났는데 그들은 이것이 Grammarly와 아무 관련이 없다고 말했습니다."라고 말했습니다. “'이것은 새로운 업무 세계이며 우리는 이러한 도구의 적절한 사용법을 알아내야 합니다.'라고 말하면서 반대 방향으로 기울고 있는 교수와 학생이 늘어나고 있다는 사실에 매우 기쁩니다. 치약을 다시 튜브에 넣을 수는 없습니다.”

캘리포니아 대학교 샌디에이고 캠퍼스의 학업 성실성 사무국장이자 전국 부정행위 전문가인 Tricia Bertram Gallant에게 있어 이 학생의 사례에서 가장 중요한 문제는 기술에 관한 것이 아닙니다. 그녀는 더 큰 문제는 대학이 학업 부정 행위 혐의를 처리하기 위한 효과적인 시스템을 갖추고 있는지 여부라고 말했습니다.

그녀는 “학생이 문법 및 철자 검사기만으로는 부정 행위로 기소될지 매우 의심스럽습니다. 하지만 그것이 사실이라면 AI 챗봇이 문제가 아니라 정책과 프로세스가 문제입니다.”라고 그녀는 말합니다.

"교수진이 도구를 사용하여 학생을 비난하고 0점을 주면 문제가 됩니다."라고 그녀는 말합니다. “그건 도구 문제가 아닙니다.”

그녀는 개념적으로 AI 도구는 학생들이 수년간 부정행위를 해왔던 다른 방법들과 다르지 않다고 말합니다. 다른 학생들을 고용하여 논문을 작성하게 합니다..

“대학이 AI 사용에 대해 완전히 별도의 정책을 수립하는 것이 나에게는 이상합니다.”라고 그녀는 말합니다. “우리 정책에서 우리가 한 일은 '기계'라는 단어를 추가한 것뿐입니다.”라고 그녀는 덧붙입니다. 이제 학업 정직성 정책은 학생이 수행해야 하는 작업을 기계를 사용하여 수행하는 것을 명시적으로 금지하고 있다고 지적했습니다.

그녀는 교수가 과제에 AI 사용을 허용하더라도 학생들이 자신에게 도움이 되는 도구를 어떻게 사용하는지 기록을 유지해야 한다고 제안합니다. ChatGPT에서 "채팅 기록을 유지하고 있는지 확인해야 합니다. 그러면 나중에 질문이 제기될 경우 프로세스에 대해 대화를 나눌 수 있습니다"라고 그녀는 말합니다.

빠르게 변화하는 풍경

문법 및 철자 검사기는 수년 동안 사용되어 왔지만 이제 그 중 다수는 학생들이 제출한 작업에 대한 생각을 했는지 여부를 이해하려는 교수의 작업을 복잡하게 만드는 새로운 AI 기능을 추가하고 있습니다.

예를 들어 Grammarly에는 이제 새로운 옵션이 있는데, 대부분 Stevens가 구독하지 않은 유료 버전에 있으며 생성 AI를 사용하여 "과제에 대한 주제 브레인스토밍 지원" 또는 "연구 계획 수립"과 같은 작업을 수행합니다. 최근 보도 자료 회사에서 넣어줬어요.

이제 Grammarly에는 어떤 글이라도 쓰거나 수정할 수 있는 AI 도구가 포함되어 있습니다.

Grammarly의 Maxwell은 회사가 이러한 새로운 기능을 신중하게 출시하려고 노력하고 있으며 학생들이 봇에게 작업을 요청하는 것을 방지하기 위한 보호 장치를 구축하려고 노력하고 있다고 말합니다. 그리고 그녀는 학교가 이 도구를 채택하면 생성 AI 기능을 끌 수 있다고 말합니다. “저는 14세 아이의 부모입니다.”라고 그녀는 말합니다. 아직 기본을 배우고 있는 어린 학생들은 나이가 많은 학생들과 요구 사항이 다르다고 덧붙입니다.

Turnitin의 Chechitelli는 Grammarly 및 기타 생산성 도구가 이제 ChatGPT를 통합하고 글쓰기 구문을 수정하는 것 이상의 기능을 수행하는 것이 학생들에게 문제가 된다고 말합니다. 그 이유는 학생들이 새로운 기능과 그 의미를 이해하지 못할 수도 있기 때문입니다.

“어느 날 로그인을 하면 새로운 선택권이 주어집니다.”라고 그녀는 말합니다. “내 생각엔 혼란스러운 것 같아.”

Turnitin 리더가 오늘날 교육자들에게 전하는 가장 중요한 메시지는 AI가 제공하는 도움이 무엇인지에 대한 투명성입니다.

"제 조언은 사용 중인 도구에 대해 신중하게 생각하고 교사에게 과제의 발전을 보여주거나 질문에 답할 수 있도록 하라는 것입니다."라고 그녀는 말합니다.

학문적 진실성에 대한 국내 전문가인 Gallant는 교수들이 학생들이 접근할 수 있는 생성 AI 도구의 수가 점점 늘어나고 있다는 사실을 인식해야 한다고 말합니다.

“문법은 문법과 철자 검사 그 이상입니다.”라고 그녀는 말합니다. “Grammarly는 다른 도구와 마찬가지로 윤리적으로 사용될 수도 있고 비윤리적으로 사용될 수도 있습니다. 그것은 그것이 어떻게 사용되는지 또는 그 용도가 어떻게 모호해지는지입니다.”

Gallant는 교수들조차도 자신의 글을 쓰고 학술지에 출판할 때 이러한 윤리적 경계에 부딪히고 있다고 말합니다. 그녀는 저널 기사 작성에 ChatGPT를 사용하고 "AI가 아이디어를 제안하는 부분에 참여하는 것을 잊어버린" 교수들에 대해 들었다고 말했습니다.

그녀는 이러한 새로운 생성 AI 도구가 잘 구성된 텍스트를 쉽게 뱉어낼 수 있다는 점과 사람들이 하는 일이 기계에 프롬프트를 입력하는 것뿐인데도 일을 하고 있다고 생각하게 만들 수 있다는 점에 뭔가 매혹적인 점이 있다고 덧붙입니다.

Gallant는 “모든 인간, 특히 초보자와 젊은 사람들의 경우, 도움이 될 때와 나를 위해 일을 할 때 사이에 자기 규제가 부족합니다.”라고 말합니다.

spot_img

최신 인텔리전스

spot_img