사진과 이미지를 시로 바꿔주는 마이크로 소프트 AI

최근에 Microsoft는 중국어 전용 AI인 XiaoIce 챗봇에게 사진 및 이미지를 보고 시르 짓는 법을 가르쳤습니다. 당연히 인간이 시를 짓는 것처럼 사물에서 오는 영감을 받아 시가 만들어지는 것은 아니지만, 인간의 행동양식을 따라하는 것이기 때문에 흥미로운 과정이라고 생각합니다. 당연히 시를 쓰는 최초의 AI는 아니지만 '이미지에서 영감을 얻은 중국어시를 생성 할 수있는 최초의 인공 지능'입니다.

"외로움의 날개가 바위와 물을 살포시 감싸안고,
공허함을 산책하며,
땅은 부드러워져간다."

AI를 학습시켜 특정 이미지에 대해 텍스트나 캡션을 어떻게 생성하는지에 대해 머신러닝 연구자들 사이에서 나름 인기가 있는데요,
그 이유는 만약 언젠가 AI가 인간이 세계를 바라보는 시각을 배우게 된다면, 그야말로 인간이 AI에게 인간이 다른 사물을 대하는 인간의 세계관을 AI에게 완전히 학습시킬 수 있다고 믿고있기때문입니다. 인간이 사진을 보게되면 이를 통해 여러가지 정보를 유추하게되죠. 사진 내 사물을 확인하고 사람들의 얼굴 특징을 묘사 등을 할 수 있죠. 이런 모든 것은 정황을 통해 끌어낼 수 있는 우리 인간의 능력을 기반으로 하고있습니다. 보다 자율적이고 더 나은 결과를 AI로부터 끌어내는 방법 중 하나는 결과물이 인간이 수행하는 작업과 구별 할 수 없을 때까지 머신러닝 모델을 지속적으로 조정하는 것입니다. 하지만 "갈색 탁자 위에 빨간 사과가 보인다"와 같은 간단한 묘사를 AI가 해냈다고 해도 별로 의미는 없겠죠. 인간이 한 것이냐 아니면 기계의 결과물이냐고 묻는 것 자체가 의미없는 질문입니다. 그렇기때문에 연구원들은 인간이 구사하는 더 복잡한 언어를 기계를 통해 실현시키기위해 '시'에 접근하게되었습니다. 정말 이 보다 더 복잡하고 정교한 언어는 없으니까요. 그렇다면 어떻게 작동하게 될까요?

몇 가지 규칙을 입력 후 뉴럴 네트워크를 '시를 생성하는 측면'과 '시를 판단하는 측면'으로 분리합니다. 판단하는 측에서 먼저 규칙이 충족되고 인간의 시점에서 부합한다고 판든을 내리면 통과하게됩니다. 그리고 최종적으로 인간이 결과를 확인하며 좋은 결과물이 나올때까지 변수를 조정하며 지속적으로 이 과정을 반복합니다.

마이크로 소프트는 최근 이미지에서 '영문시'를 생성하는 AI를 만들어 이를 더 연구하고 있는데요, 다들 아시다시피 인간에게도 중국시를 쓰는 것은 다른 일련의 규칙과 매개 변수를 필요로합니다. Durham University의 영어시를 연구하는 연구원 Chutian Xiao는 "시를 배우는 것 뿐만아니라 다른 언어로 시를 쓰는것은 어려운 일"이라고 말합니다. 그리고 인간의 관점에서 봤을때도 특히 중국시의 경우는 수년에 걸쳐 시에 대한 규칙들이 많이 변화되었습니다. 마이크로 소프트 연구원들에 따르면 봇을 연구하면서 중국 현대시를 쓰는 것은 정말 쉽지 않은일이라고 합니다.

"중국의 전통시는 엄격한 규칙과 패턴으로 구성되어 있지만 (예 : 5단어의 4중주는 4개의 문장을 포함해야하며 각 문장은 5자의 중국어로 구성되며, 단어에는 특정 위치의 운이 필요), 중국의 전통시와 비교할 때, 현대 중국시는 지방어로 구조화되어있지 않은데요, 이는 지방어가 화음적인 면에서 더 독보일 수 있지만, 단어나 문법의 오류적인 면에서는 읽은이로 하여금 더 비판을 받기때문입니다.현대시를 짓는것 또한 상상력과 창의적인 언어를 요구합니다. 이러한 점에서 봤을때, 고전시보다 훌륭한 현대시를 생성하는 것이 더 어려울 수 있는 것이죠. "

그래서 마이크로 소프트의 AI 시 창작기술은 얼마나 좋을까요? 사실 이는 완전히 주관적이기 때문에 단답형으로 대답하기는 어렵습니다. 퓨쳐리스트 Dan Robitzki는 영어시 창작봇에 대한 평가로는 "고뇌하는 십대들의 창작시 수준"정도라고 말하며 큰 점수를 주지는 않았는데요, 시란 정말 주관적이기 때문에 이를 절대적인 평가로 볼 수 있는 없습니다. 하지만 연구자들은 봇의 능력을 평가하기위해서 실험을 수행하였는데, 그 실험에 참여한 참가단들에게 압도적으로 좋은 평가를 받았습니다. 그 이유는 봇이 창작한 시는 상상력이 풍부하며, 감동적이고 인상적이기 때문이었다고 합니다.

출처 : https://thenextweb.com/artificial-intelligence/2018/08/10/microsofts-ai-can-convert-images-into-chinese-poetry/