딥페이크 얼굴이 놀라울 정도로 현실적으로 보이는 이유를 해명! 가짜를 의심하기 전에 믿어버리게 되는 - AI 얼굴이 만들어내는 "하이퍼리얼리즘"

딥페이크 얼굴이 놀라울 정도로 현실적으로 보이는 이유를 해명! 가짜를 의심하기 전에 믿어버리게 되는 - AI 얼굴이 만들어내는 "하이퍼리얼리즘"

왜 AI의 얼굴은 "진짜보다 더 진짜처럼" 보이는가 - 뇌 이미지가 보여준 의외의 함정

SNS에서 본 사람의 얼굴에 위화감이 없다. 표정은 자연스럽고, 어딘가 친근하다. "보통 사람처럼 보인다"고 느끼고, 그대로 프로필이나 메시지를 신뢰한다.

그러나 그 안도감이야말로 판단을 잘못하게 만드는 입구가 될지도 모른다.

플로리다 대학의 연구팀이 보고한 것은, AI가 생성한 얼굴을 진짜 인물 사진보다 더 진짜처럼 평가해버리는 현상이다. "딥페이크 하이퍼리얼리즘"이라고 불리는 이 경향은 단순히 가짜를 간파하지 못한다는 이야기에 그치지 않는다.

우리가 "진짜처럼 보이는" 단서를 삼고 있는 특징이 오히려 가짜를 선택하게 하는 방향으로 작용할 가능성이 있다.


"간파하지 못하는" 것보다 까다로운, 판단의 역전

딥페이크라고 하면, 유명인의 얼굴을 다른 영상에 겹친 영상을 떠올리는 사람도 있을 것이다. 이번 연구에서 다룬 것은 AI에 의해 생성된 얼굴의 정지 이미지다.

대학의 발표에 따르면, 연구팀은 실제 인물의 얼굴 사진 40장과 AI가 생성한 얼굴 40장을 준비했다. 참가자에게 진짜처럼 보이는 정도를 평가하게 하고, 그때의 뇌 활동을 조사했다.

결과는, 젊은 층과 고령층 모두 평균적으로 AI의 얼굴을 실제 사진보다 더 진짜처럼 평가한다는 것이었다. 게다가 고령층에서는 이 경향이 강했다.

여기서 주의할 점은 "모든 사람이, 모든 AI 이미지에 속는다"는 의미가 아니라는 것이다. 특정 이미지와 실험 조건 하에서 집단으로서 평가의 편향이 확인된 것이다.

그럼에도 불구하고 자신의 감각에 의존할 때의 약점은 드러난다. "자연스럽게 보이니까 진짜일 것이다"라는 판단은 생각만큼 확실한 것이 아니다.


뇌의 "위화감에 관련된 영역"은 어떻게 반응했는가

연구팀이 주목한 것은 뇌 깊숙이 있는 "전두엽 피질"이라는 영역이다. 중요한 정보나 신뢰할 수 없는 가능성이 있는 단서의 처리 등에 관련되어 있다.

연구에서는 실제 인물 사진에 비해 AI의 얼굴을 보고 있을 때 이 영역의 활동이 낮아지는 경향이 확인되었다. 또한, 활동이 낮은 것과 얼굴을 더 진짜처럼 평가하는 것 사이에도 관련이 보였다.

다만, 전두엽 피질을 단순한 "가짜 발견 센서"로 생각하는 것은 정확하지 않다. 이 영역만으로 진위를 판정하는 것이 아니며, 활동의 차이가 발견된 것과 그것이 판단의 오류를 일으켰다고 증명하는 것도 별개이다.

이번 결과는 AI의 얼굴을 자연스럽게 받아들이는 현상을 이해하기 위한 단서이다. "AI가 뇌의 경보 장치를 멈추게 한다"고까지 단정할 수 있는 것은 아니다.


"익숙한 얼굴처럼 보이는 것"이 진짜처럼 보이는 것으로 바뀐다

그렇다면 왜 실재하지 않는 얼굴이 그렇게 자연스럽게 보이는 것일까?

연구를 이끈 나탈리 에브너 교수는 얼굴의 "전형성"을 설명의 하나로 들고 있다. 많은 얼굴의 특징을 평균화하면 두드러진 특징이 약해지고, 사람이 떠올리는 전형적인 얼굴에 가까워진다. 이러한 얼굴은 처리하기 쉽고, 호감이 갈 가능성이 있다.

물론, AI가 항상 여러 사진을 단순히 겹쳐놓는다는 의미는 아니다. 생성된 얼굴에 나타나는 특징을 인간이 어떻게 받아들이는가에 대한 이야기이다.

우리는 일상생활에서도 "익숙하다" "쉽게 이해할 수 있다"는 감각을 판단의 지름길로 삼는다. 그러나 그 처리의 용이함을 이미지가 진짜라는 증거로 착각할 수 있다.

이 설명에 따르면, 경계해야 할 것은 부자연스러운 이미지뿐만이 아니다. 오히려 걸리는 부분이 없고, 안심하고 볼 수 있는 얼굴에도 같은 신중함이 필요하다.


고령자만의 문제로 치부하면 연구의 의미를 잃는다

이번에 고령층에서는 AI의 얼굴을 진짜처럼 평가하는 경향이 더 강했다. 한편, 전두엽 피질의 활동에 대해서는 젊은 층과 고령층 사이에 유의미한 차이가 인정되지 않았다고 한다.

즉, "나이에 따라 이 영역의 반응이 약해지기 때문에 고령자는 AI의 얼굴을 믿는다"는 설명이 이번에 그대로 뒷받침된 것은 아니다. 연령 차이가 생기는 자세한 이유는 계속해서 검토할 필요가 있다.

그리고 젊은 층에도 같은 방향의 편향이 보였다는 점은 간과할 수 없다.

스마트폰을 익숙하게 사용하는 것과 AI 이미지를 정확하게 판단할 수 있는 것은 동일하지 않다. "부모님은 주의해야 하지만 나는 괜찮다"고 생각하면 자신에 대한 확인이 소홀해진다.

가족과 공유할 때는 "고령자는 속기 쉽다"는 전달 방식보다 "인간의 감각에는 이러한 약점이 있다"고 설명하는 것이 누구나 자신의 문제로 받아들이기 쉬울 것이다.


SNS에서는 "간파할 자신"에 대한 경계와 출처 확인을 요구하는 목소리

AI의 얼굴의 현실성을 둘러싸고는 SNS에서도 논의가 계속되고 있다. 여기서는 이번 논문에 대한 직접적인 반응이 아니라, 같은 주제를 다룬 해외 게시판 Reddit의 관련 스레드에서 확인된 의견을 요약한다.

 

하나는,이미지를 간파하는 능력에 대한 과신이 위험하다는 목소리다. 가짜의 정교함뿐만 아니라 "내가 알 수 있다"고 생각하는 것이 문제라고 지적하는 게시물이 있었다. 구별할 자신이 없다고 솔직히 인정하는 게시물도 보였다.

두 번째는,개인이 눈을 크게 뜨는 것만으로는 충분하지 않다는 의견이다. 생성 시의 워터마크나 이미지의 이력을 확인할 수 있는 시스템, 표시 기준 등을 요구하는 목소리가 있었다.

세 번째는,사칭에 대한 악용을 걱정하는 목소리다. 가상의 인물로 가장하여 상대에게 접근하는 행위가, 현실적인 얼굴 이미지로 인해 쉬워질 것이라는 우려가 제기되고 있다.

한편, 인터넷상의 이미지를 무조건 신뢰하지 않는 습관이 확산되는 계기가 될 것이라는 시각도 있었다.

이들은 하나의 스레드에 모인 개인의 의견이며, 사회 전체의 의식을 나타내는 조사는 아니다. 그럼에도 "더 잘 보면 알 수 있다"는 대책만으로 충분한가라는 질문은 이번 연구와도 겹친다.


일본에서 생각해 보고 싶은 것은 "진짜 얼굴"과 "신뢰할 수 있는 상대"의 차이

이 연구를 일본의 일상생활에 끌어들이면, SNS의 프로필 사진이나 온라인에서 만난 상대의 얼굴을 어떻게 다룰 것인가라는 문제가 된다.

예를 들어, 투자에 대해 상담하고 있는 상대가 차분한 표정의 사진을 사용하고 있다. 매일 메시지를 보내오는 상대가 친근한 미소를 보이고 있다. 그 인상은 대화를 시작하는 계기가 될 수는 있어도, 신원이나 이야기의 정확성의 증거는 되지 않는다.

애초에 이미지가 AI 생성이 아니라 진짜 사진이었다고 해도, 그것을 사용하는 인물이 사진의 본인이라는 보장은 없다. 또한, 본인의 사진이라 하더라도 제안하는 이야기가 신뢰할 수 있다는 보장은 없다.

"이미지가 진짜인지" "상대가 누구인지" "이야기의 내용이 정확한지"는 각각 별도로 확인할 필요가 있다.

이 구별을 의식하면, 대책도 얼굴의 관찰에서 정보의 확인으로 바뀐다.


"간파"보다 먼저, 확인하는 습관을

이번 연구에서 일상으로의 시사로 생각할 수 있는 것은, 진짜처럼 보이는 얼굴에 안심한 순간일수록 이미지의 외부에 있는 정보를 확인하는 자세다.

구체적으로는 다음과 같은 행동이 도움이 된다.

  • 얼굴 사진만으로 신원을 판단하지 않는다. 소속처나 경력은 상대가 보낸 정보뿐만 아니라 독립된 경로에서 확인한다.
  • 지인을 사칭하는 연락은 이전부터 알고 있는 연락처로 확인한다. 새로운 계정의 사진이 본인과 비슷해도 그것만으로 신뢰하지 않는다.
  • 송금이나 개인정보 제공을 재촉하는 이야기는 판단을 멈춘다. 상대의 얼굴 인상과 요구의 타당성을 분리해서 생각한다.
  • AI 판정 도구의 결과를 신원 보증으로 취급하지 않는다. 이미지의 판정과 상대의 신뢰 확인은 별개의 작업이다.

연구자는 이러한 인지의 편향이 있다는 것을 아는 것을 대책의 첫걸음으로 중시하고 있다. 다만, 이번 실험은 주의 환기로 인해 실제 사기 피해가 얼마나 줄어드는지를 검증한 것은 아니다.

"알면 반드시 막을 수 있다"고 생각하지 말고, 알고 나서 확인하는 절차를 갖는 것이 중요하다.


진짜처럼 보이는 것은 더 이상 신원 증명이 되지 않는다

이번 연구가 다시 묻고 있는 것은 AI의 진보만이 아니다. 우리가 평소 무엇을 근거로 상대를 믿고 있는가라는 문제이기도 하다.

자연스러운 표정, 친근함, 익숙한 얼굴. 그러한 인상은 사람과의 관계를 쌓는 데 있어 중요한 것이다. 그러나 화면 너머의 인물이 실재하는 것과 발언이 정확한 것을 보장하지는 않는다.

앞으로 필요한 것은 모든 얼굴을 의심하는 것이 아니라, 얼굴만으로 확인을 끝내지 않는 것이다.

"진짜처럼 보인다"고 느낀 그 다음에 무엇을 확인할 것인가. AI의 얼굴이 가까워질수록 그 한 번의 수고의 의미는 커진다.


출처

  1. Eurasia Review:플로리다 대학의 연구에 대해, 실험의 개요, 연구자의 설명, 연령 차이와 뇌 활동의 결과를 소개.
    https://www.eurasiareview.com/16112026-deepfake-faces-appear-hyperreal-these-brain-scans-may-explain-why/

  2. 플로리다 대학: 연구 소개
    얼굴 이미지의 구성, 하이퍼리얼리즘의 해석, 전두엽 피질의 반응, 연구자에 의한 주의 환기의 설명.
    https://news.ufl.edu/2026/11/deepfake-faces/University of Florida

  3. Social Cognitive and Affective Neuroscience: 연구 논문
    "When Fakes Feel Real: Behavioral and Neural Mechanisms of Deepfake Hyperrealism in Younger and Older Adults". 젊은 층·고령층의 평가 경향과 전두엽 피질의 활동과의 관련을 보고. 다만, 논문 초록과 홍보 기사에서 참가자 수의 기재가 달라 본 기사에서는 인원수의 단정을 피했다.
    https://doi.org/10.1093/scan/nsag086academic.oup.com

  4. Reddit: AI 생성의 얼굴을 둘러싼 관련 논의
    SNS란에서 소개한, 간파할 자신에 대한 경계, 사칭에 대한 우려, 이력 확인이나 표시 기준을 요구하는 의견의 참조원. 이번 논문에 대한 직접적인 반응은 아니다.
    https://www.reddit.com/r/artificial/comments/1rb0619/fake_faces_generated_by_ai_are_now_too_good_to_be/