노트

생성형 AI 가상 메이크업과 AR 필터, 무엇이 다를까

최종 수정: 2026년 8월 22일

AR 필터는 실시간 영상 위에 색을 입히고, 생성형 가상 메이크업은 정지된 사진 한 장을 다시 그려낸다. 이 둘은 서로 다른 질문에 답한다.

AR 필터는 카메라 영상에서 얼굴을 찾아, 재생 중인 영상 위에 초당 30번 이상의 속도로 색을 입힌다. 이 모든 처리는 스마트폰 자체에서 이루어진다. 생성형 가상 메이크업은 정지된 사진 한 장을 모델에 보내면 모델이 이미지를 다시 그려서 새로운 사진을 돌려준다. 이 둘을 가르는 나머지 거의 모든 차이는 바로 이 한 가지 차이에서 비롯된다.

각각 어떻게 작동할까

AR 필터는 먼저 얼굴을 추적하는 것부터 시작한다. 소프트웨어가 얼굴에 메시를 씌우고 프레임마다 그 메시를 따라간다. 예를 들어 애플의 ARKit은 추적된 얼굴을 ARFaceGeometry라는, 인스턴스가 바뀌어도 위상 구조는 일정하게 유지되는 3D 메시로 다루며, 애플 자체 페이지도 가상 메이크업 적용을 이 메시 위에 얹는 것으로 소개한다. 소프트웨어는 이 메시의 각 영역에 색을 블렌딩한 다음 다시 영상에 합성한다. 초당 30프레임이라면 이 작업 전체에 쓸 수 있는 시간은 약 33밀리초뿐이다. 그래서 작업이 가벼워야 한다. 이미 있는 픽셀 위에 색을 블렌딩하고, 잘라 붙인 티가 나지 않도록 경계를 부드럽게 처리하는 정도다. 브랜드 웹사이트에서 만나는 가상 메이크업도 같은 원리를 그 회사 자체 트래커로 브라우저에서 돌리는 것이다.

생성형 가상 메이크업은 프레임마다 당신을 따라가지 않는다. 사진 한 장을 서버에서 돌아가는 모델에 보내면, 모델이 같은 사진에 메이크업이 담긴 새 이미지를 만들어낸다. 이 모델은 아무것도 위에 얹지 않는다. 픽셀 자체를 다시 만들어내므로, 메이크업은 위에 얹힌 레이어가 아니라 이미지 자체의 일부가 된다.

둘을 나란히 놓고 보면

아래 표에서 생성형 사례로 든 것은 Looksmith이며, 현재 이용 가능한 게 아니라 곧 iOS에 출시될 예정이다.

직접 확인해 볼 수 있는 것들

AR 필터에서는 같은 립스틱이 왜 매번 다르게 보일까

그 밑에 깔린 영상 자체가 매번 다르기 때문이다. 스마트폰은 자동 화이트밸런스와 자동 노출을 초당 여러 번 계산해서 방 안에서 무엇을 흰색으로 볼지 정하고, 화면 전체를 그 판단 쪽으로 끌어당긴다. 따뜻한 전구 아래에 있으면 카메라가 그 따뜻함을 빼내려 하고, 창가에 서면 반대로 움직인다. 필터는 두 경우 모두 같은 색상값을 칠하지만, 당신 눈에는 서로 다른 두 개의 립스틱으로 보인다.

이건 브랜드의 가상 메이크업 페이지 아무 곳에서나 2분이면 직접 확인할 수 있다. 백열등 아래에서 같은 색상을 켠 채로, 그대로 창가로 걸어가 보면 된다. 제품에는 아무 변화도 없었다. 필터가 칠하는 숫자값도 바뀌지 않았다.

어느 쪽이 더 정확한 색을 보여줄까

둘 다 아직 그런 주장을 할 자격을 얻지 못했다. 색상 정확도 퍼센트를 내세우는 가상 메이크업이 있다면, 그 수치를 뒷받침하는 방법론을 공개하기 전까지는 그냥 광고 문구로 취급하는 게 맞다. 정지된 사진은 흔들리는 화이트밸런스가 아니라 고정된 화이트밸런스 하나만 가지므로, 생성된 룩이 최소한 당신이 들여다보는 동안 흔들리지는 않는다. 하지만 카메라가 그 사진을 찍을 때는 어떤 조건 하나에서 촬영해 같은 파이프라인을 거쳤을 뿐이고, 결과물은 색소를 측정한 값이 아니라 그럴듯해 보이는 그림에 가깝다. Looksmith는 색상 정확도 퍼센트를 공개하지 않는데, 애초에 그런 수치를 측정한 적이 없기 때문이다.

정확한 색조가 관건이라면 답은 낮에 자연광 아래서 직접 턱에 발라보는 물리적 테스터다. 두 가지 디지털 방법은 그 단계에 이르기 전에 후보를 좁혀줄 뿐이다.

브랜드의 AR 필터는 왜 항상 그 브랜드 제품만 보여줄까

그 필터가 애초에 그 브랜드의 카탈로그를 중심으로 만들어졌기 때문이다. 지금까지 써본 브랜드 가상 메이크업 대부분은 사실 두 엔진 중 하나가 다른 이름을 달고 있는 것이다. 로레알은 2018년 3월 ModiFace를 인수했고, YouCam Makeup을 만드는 Perfect Corp는 2022년 뉴욕 증권거래소에 상장했다. 브랜드는 색상 목록을 제공하고 엔진은 추적 기술을 제공하며, 색상 목록이야말로 이 전체 작업의 목적이다.

한 브랜드의 필터는 세 개의 다른 브랜드로 완성한 룩을 보여줄 수 없고, 자기 매장에서 팔지 않는 제품이 당신에게 맞는 답이라는 결론에도 절대 이르지 않는다. 세포라 버추얼 아티스트나 얼타 글램랩 같은 리테일러 가상 메이크업은 여러 브랜드를 아우르지만, 그 리테일러가 취급하는 브랜드로만 한정된다. 이런 엔진을 실제로 누가 만드는지는 가상 메이크업 체험이란 무엇인가에서 더 다룬다.

생성형 가상 메이크업은 얼마나 걸릴까

Looksmith 기준 약 1분이다. 기존 이미지에 색을 입히는 게 아니라 완전한 이미지를 새로 생성하는 작업이고, 이 작업은 손안이 아니라 서버에서 돌아간다. 여기에는 상호작용이랄 게 없다. 실시간 미리보기 대신 완성된 사진 한 장을 얻는 거래이며, 실시간 미리보기가 필요했다면 생성형 가상 메이크업은 맞지 않는 도구다.

가상 메이크업으로 본 결과를 저장할 수 있을까

이게 사람들이 가장 먼저 알아차리는 차이다. AR 필터는 실시간 오버레이이므로 닫으면 스크린샷을 미리 찍어두지 않은 이상 아무것도 남지 않는다. 생성형 가상 메이크업은 파일을 만들어낸다. Looksmith는 메이크업이 그려진 당신 자신의 사진을 9:16 비율 포스터로 돌려주고, 원하면 소리 없는 4초짜리 반복 재생 클립도 함께 주며, 사용한 제품 목록이 옆에 표시된다. 네 개를 화면에 나란히 놓고 볼 수도 있다. 그중 하나를 질문과 함께 친구에게 보낼 수도 있고, 무엇을 고를지 감이 잡힐 때까지 내일까지 스마트폰 안에 그냥 두어도 된다.

둘 중 어느 쪽이 내 얼굴을 바꿀까

AR 메이크업 필터는 원칙적으로 색만 칠하므로 얼굴 자체는 건드리지 않는다. 다만 실제로는 그런 필터를 담은 앱들이 형태 변형 도구를 함께 넣어두는 경우가 많고, 한 번 켜둔 설정을 다음 세션에서 놓치기도 쉽다. 필터가 색만 다룬다고 넘겨짚지 말고 그 앱의 기능 목록을 직접 확인하는 편이 낫다.

생성형 가상 메이크업은 반대 위험을 안고 있다. 모델이 이미지 전체를 다시 만들어내므로 제작사가 제약을 걸어두지 않으면 원본에서 벗어날 수 있다. Looksmith는 설계상 어떤 얼굴 골격도 바꾸지 않는다. 홑꺼풀은 홑꺼풀로 남는다. 나이, 자세, 표정, 프레이밍은 그대로 유지되는데, 돌아오는 결과물이 새로 만든 인물 사진이 아니라 당신 자신의 사진을 손본 것이기 때문이다. Looksmith는 안경을 정확히 그대로 유지하며 없던 안경을 추가하지 않고, 피부를 매끈하게 다듬는 뷰티 필터도 적용하지 않는다. 고정된 항목의 전체 목록은 AI 가상 메이크업이 내 얼굴을 바꿀까에서 확인할 수 있다.

어떤 용도에는 어느 쪽을 써야 할까

대부분의 비교글이 쓰기 꺼리는 부분이 바로 여기다.

간단히 정리하면 이렇다. 모양과 위치가 궁금하고 움직여봐야 할 때는 AR 필터를 쓰고, 완성된 룩 전체가 나한테 어울리는지가 궁금하고 내일 다시 들여다볼 무언가가 필요할 때는 생성형 가상 메이크업을 쓴다.

Looksmith는 어디에 속할까

Looksmith는 Mirable Labs, Inc.가 만든 생성형 가상 메이크업 앱으로 곧 iOS에 출시될 예정이다. Looksmith에서는 셀피 여러 장으로 재사용 가능한 나만의 얼굴, 라이크니스를 한 번 저장한다. 그다음 세 가지 방법 중 하나로 룩을 고른다. Style Me는 여러 룩을 한 번에 입혀 보여주고, Create Look은 글로 쓴 설명을 받고, Mirror a Look은 참고 사진에서 메이크업만 옮겨온다. Looksmith는 입술과 라이너부터 아이섀도, 블러셔, 눈썹까지 12개 리전에 걸쳐 룩을 구성하고, 사용한 제품 목록이 옆에 표시된 당신 얼굴 포스터로 돌아온다.

Looksmith의 처음 여섯 개 룩은 온보딩 시 무료로 제공된다. 이후로는 패키지로 구매하는 크레딧을 쓰며 구독은 없다. 보낸 사진이 어떻게 처리되는지는 개인정보처리방침에 나와 있다.

둘 다 해결하지 못하는 것

두 도구 모두 질감이나 지속력, 향은 다루지 않는다. AR 필터는 점심때쯤 제품이 잔주름에 끼는지 알려줄 수 없고, 생성된 룩도 마찬가지다. 둘 다 단 한 순간을 기준으로 작동하고, 제품이 실제로 그 자리에 있는 것도 아니기 때문이다. 생성된 룩이 특정 제품 하나가 정확히 그 픽셀을 만들어낸다는 보장도 아니다.

두 도구가 하는 일은 결국 같다. 시도해볼 목록을 줄여주는 것이다. 다만 서로 다른 방향에서 줄인다. 필터는 움직이는 동안 어울리지 않는 색상을 걸러내고, 생성된 이미지는 완성된 조합이 나에게 맞는지를 알려준다. 둘 중 맞지 않는 쪽을 골랐다가 가상 체험 자체가 소용없다고 결론짓는 경우가 많다. 둘 중 어느 쪽을 쓰든 그다음에 거쳐야 할 물리적 단계는 사지 않고 메이크업을 체험하는 법에서 다룬다.