"모나리자"의 수수께끼를 칠한 미소는 전 세계에 알려져 있지만, 그 유명한 얼굴은 최근 인공 지능 (AI)에 의해 놀라 울 정도로 새로운 표현을 보여 주었다.
5 월 21 일 YouTube에 공유 된 비디오에서 3 개의 비디오 클립이 모나리자의 입술을 움직이고 머리를 돌릴 때 당황스러운 예를 보여줍니다. 그녀는 이미지를 분석하고 처리하기 위해 인간의 뇌처럼 정보를 처리하는 AI 유형 인 컨볼 루션 신경망에 의해 만들어졌습니다.
연구원들은 얼굴 특징의 일반적인 모양과 서로에 대한 행동 방식을 이해 한 다음 해당 정보를 스틸 이미지에 적용하도록 알고리즘을 교육했습니다. 그 결과 단일 프레임에서 새로운 얼굴 표정으로 사실적인 비디오 시퀀스가 만들어졌습니다.
모나리자 비디오의 경우 AI는 세 사람의 데이터 세트에서 얼굴 움직임을 "학습하여"세 가지 매우 다른 애니메이션을 제작했습니다. 세 개의 클립 각각이 여전히 모나리자로 인식 될 수 있었지만, 훈련 모델의 외형과 행동의 변화는 "살아있는 인물"과는 다른 "특성"을 부여했다. 비디오에 설명 된 삼성 AI 센터 (모스크바에 위치).
Zakharov와 그의 동료들도 Albert Einstein, Marilyn Monroe 및 Salvador Dali와 같은 20 세기 문화 아이콘 사진으로 애니메이션을 제작했습니다. 연구자들은 5 월 20 일 온라인 출판 저널 arXiv에 발표 된 연구에서 동료 검토를 거치지 않은 결과를 설명했습니다.
딥 페이크라고 알려진 이와 같은 원본 비디오를 제작하는 것은 쉽지 않습니다. 인간의 머리는 기하학적으로 복잡하고 매우 역동적입니다. 연구 저자들은 헤드의 3D 모델에 "수만 개의 매개 변수"가 있다고 썼다.
또한 인간 비전 시스템은 3D 모델링 된 인간의 머리에서 "심지어 작은 실수"를 식별하는 데 매우 능숙하다고 연구에 따르면. 거의 인간적인 것처럼 보이지만 그다지 보이지 않는 무언가를 보면 엉뚱한 계곡 효과라고 알려진 심오한 불안감을 느끼게됩니다.
AI는 설득력있는 딥 페이크 생성이 가능하다는 것을 이미 입증했지만 원하는 피사체의 여러 각도가 필요했습니다. 새로운 연구를 위해 엔지니어들은 실제 얼굴을 보여주는 매우 큰 참조 비디오 데이터 세트에 AI를 도입했습니다. 과학자들은 얼굴이 일반적으로 어떻게 동작하는지 신경망에 가르치기 위해 얼굴에 적용 할 얼굴 랜드 마크를 설정했습니다.
그런 다음 AI는 참조 표현을 사용하여 소스 기능의 이동을 매핑하도록 AI를 교육했습니다. 이로 인해 AI는 단 하나의 이미지 만 가지고 작업 할 때에도 딥 페이크를 만들 수있었습니다.
그리고 더 많은 소스 이미지는 최종 애니메이션에서 더욱 자세한 결과를 제공했습니다. 과학자들은 한 개가 아닌 32 개 이미지로 만든 비디오가 "완벽한 사실감"을 달성했다고 과학자들은 썼다.
