【STV 김충현 기자】일반인들은 셰익스피어 등 유명 시인과 생성형 인공지능(AI) 챗GPT3.5가 이를 따라해 지은 시를 구분하지 못하는 것으로 나타났다.

두 시를 평가하라는 요청에 AI가 쓴 시를 더 선호했다.

두 시를 비교한 사람들은 사람이 창작한 시의 복잡성을 AI가 만들어낸 ‘일관성 없음’으로 착각하고 생성형 AI가 얼마나 인간과 유사해 보일 수 있는지를 과소평가한 것으로 확인됐다.

미국 피츠버그대 브라이언 포터 박사팀은 15일 과학 저널 사이언티픽 리포트에서 일반인들에게 유명 시인 10명의 시와 이들의 시를 모방한 챗GPT3.5의 시를 제시한 다음 이를 구분하고 평가하는 두 가지 실험에서 이러한 결과를 얻었다고 밝혔다.

연구팀은 첫 실험에서 1634명을 대상으로 AI가 생성한 시와 유명 시인의 시를 구별하는 실험을 했다.

두 번째 실험에서는 696명에게 AI의 시와 시인들의 시에 대해 아름다움, 독창성 등 14가지 항목을 평가하게 했다.

실험에는 제프리 초서부터, 윌리엄 셰익스피어, 월트 휘트먼, TS엘리엇 등 유명 시인 10명의 시 50편 및 챗GPT3.5가 이들의 시를 모방해 지은 50편이 쓰였다.

첫 번째 실험에서 유명 시인의 5편과 AI의 시 5편을 무작위로 제시하고 시인과 AI의 시를 구별하도록 한 결과 정확도는 46.6%에 그쳤다.

두 번째 실험에서 참가자들을 세 그룹으로 나눈 후 각 그룹에 시를 제시할 때 시에 대해 ‘사람이 쓴 시’ ‘AI가 쓴 시’ ‘출처 정보 없음’ 등의 정보를 주고 시의 아름다움과, 리듬, 독창성 등 14개 항목을 평가하게 했다.

AI가 쓴 시라는 정보를 접한 사람들은 사람이 쓴 시라는 말을 들은 사람들보다 점수를 확연히 낮게 줬다.

하지만 시의 출처 정보가 없을 경우에는 AI가 생성한 시가 사람이 쓴 시보다 더 높은 점수를 받았다.