AI가 만든 변형문제, 정답이 둘이 되지 않게 확인하는 법

복수정답이 왜 그렇게 곤란할까요?

시험에서 복수정답이 나오면 이의 제기가 들어오고, 수업에 대한 신뢰에도 바로 영향을 줘요

저희도 AI로 문제를 만들면서 정답이 둘로 읽히는 문항을 여러 번 만났어요그래서 어떤 모양으로 생기는지 정리해 두었어요

정답이 둘로 읽히는 대표적인 다섯 경우예요

첫째는 제목과 주제예요오답이 틀린 내용이 아니라 범위가 좁을 뿐 맞는 내용으로 만들어져서, 정답과 함께 성립해 버려요

둘째는 한단어 빈칸이에요빈칸에 정답과 뜻이 거의 같은 다른 단어도 들어갈 수 있어요

셋째는 낱말 쓰임이에요부적절한 낱말로 넣은 대체어가 원문의 뜻을 거의 바꾸지 않아서 적절한 낱말로도 읽혀요

넷째는 요약문이에요한쪽 빈칸의 방향이 모호하면 서로 반대되는 단어가 둘 다 자연스럽게 읽혀요

다섯째는 어법이에요두 선택지가 문법적으로 모두 가능한 문장이 만들어지기도 해요

예를 하나 들어 볼게요

이해를 돕기 위해 직접 지어낸 예시예요실제로 생성된 결과가 아니에요

꿀벌이 8자 춤으로 먹이의 방향과 거리를 동료에게 알려 주는 내용의 글이 있다고 해 볼게요정답 제목이 How Bees Share Information About Food라면, 오답으로 How Bees Dance를 만들면 어떻게 될까요?

이 제목은 글의 내용과 어긋나지 않아요그저 범위가 좁을 뿐이에요학생이 이 선택지도 정답이 될 수 있다고 따지면 반박하기가 어려워요

좋은 오답은 지문에 없는 내용이거나, 초점을 잘못 읽은 내용이거나, 주장을 뒤집은 내용처럼 분명히 틀린 방향이어야 해요

인쇄하기 전에 이렇게 확인해 보세요

문항을 전부 읽을 필요는 없어요복수정답이 생기기 쉬운 곳부터 보면 돼요

먼저 정답을 가리고 직접 풀어 보세요두 선택지 사이에서 망설였다면 그 문항은 의심해 봐야 해요

그다음엔 오답을 하나씩 지문 문장으로 반박해 보세요반박할 근거가 지문에 없으면 오답이 아닐 수 있어요

빈칸과 낱말 쓰임은 정답 단어의 유의어를 넣어서 문장이 자연스러운지 보세요

요약문은 A와 B를 따로 떼어서 각각 방향이 하나로 정해지는지 보시고요제목과 주제는 오답이 정답보다 좁을 뿐 맞는 말은 아닌지 확인하시면 돼요

교안메이커는 어떻게 줄이고 있나요?

제목처럼 정답이 둘이 되기 쉬운 유형은 문항을 만든 뒤에, 정답을 가린 채 다시 풀어 보는 검증을 한 번 더 거쳐요그래도 복수정답이 의심되면 그 문항은 빼요

문항에는 정답과 해설이 같이 붙고, 더 확인이 필요해 보이는 문항에는 검토를 권하는 표시가 붙어요

다만 모든 오류를 막는다고는 말씀드릴 수 없어요AI가 만든 문제는 어떤 서비스든 선생님의 마지막 확인을 거쳐야 해요그 확인이 쉬워지도록 해설과 표시를 같이 드려요