AI 캐릭터 일관성: 흔들림을 진단하고 고치기

증상: 캐릭터가 카메라를 정면으로 볼 때는 얼굴이 맞다가, 옆얼굴이나 위에서 내려다보는 장면, 고개를 돌릴 때는 틀려져요. 클립마다 귀나 뒤통수 모양이 달라져요.

원인: 모델은 보여준 것만 따라 그릴 수 있어요. 레퍼런스에 없는 각도는 매번 새로 추측해서 그리기 때문에 결과가 달라져요.

해결: 빠진 각도를 추가하세요. 옆모습과 3/4 각도만 있어도 대부분 해결돼요. 모델이 영상 입력을 받는다면, 고개를 돌리는 몇 초짜리 영상이 정지 사진으로는 안 보이는 각도를 채워 줘요. 예를 들어 Kling 3.0 Omni 가이드에서는 3~8초 클립으로 캐릭터 요소를 만들 수 있다고 안내해요.

증상: 캐릭터가 여러 특징이 섞인 모습으로 보여요. 머리색이 두 가지 색 사이에 있거나, 재킷 스타일이 반반 섞이거나, 나이가 조금씩 달라 보여요.

원인: 입력끼리 서로 다른 말을 하면 모델이 그 사이 어딘가로 평균을 내요. 대표적인 경우는 프롬프트의 캐릭터 설명이 이미지와 다르거나, 몇 달 간격으로 찍은 레퍼런스의 머리 모양이 다른 경우예요.

해결: 모든 입력이 같은 이야기를 하게 맞추세요. 프롬프트에서는 캐릭터 설명을 빼고 장면, 동작, 카메라만 남기세요. 나머지와 맞지 않는 레퍼런스는 빼세요. 새로운 외형을 원한다면 프롬프트로 기존 설정을 덮어쓰려 하지 말고, 새 레퍼런스 세트를 만드세요.

증상: 두 사람이 나오는 장면에서 특징이 서로 넘어가요. 남자 캐릭터가 여자 캐릭터의 눈동자색을 갖거나, 여자 캐릭터에게 남자 캐릭터의 수염 자국이 생기거나, 둘 다 평균적인 얼굴로 가까워져요.

원인: 모델이 두 정체성을 동시에 붙잡고 있는데, 어떤 특징이 누구의 것인지 구분하지 못해요.

해결: 캐릭터마다 이름이 붙은 요소나 태그가 붙은 이미지 세트를 따로 주고, 문장마다 '그/그녀'가 아니라 태그로 불러 주세요. 장면 시작부터 두 캐릭터를 떨어뜨려 배치하세요. 한 프레임에 닮은 두 사람을 넣지 마세요. 대비가 클수록 분리가 쉬워요.

증상: 클로즈업에서는 정체성이 유지되지만, 와이드 샷, 액션 장면, 모션 블러가 있는 장면에서는 무너져요.

원인: 얼굴이 수십 픽셀 높이밖에 안 되면 정체성을 표현할 공간이 없어요. 빠른 움직임은 흐릿한 프레임에서 얼굴을 다시 만들어야 하므로 상황을 더 나쁘게 만들어요.

해결: 정체성이 중요해지기 전에 미디엄 샷으로 전환하세요. 얼굴이 작게 나오는 장면은 해상도를 높이고, 프롬프트에서 동작을 천천히 설정하세요. 꼭 와이드 샷을 써야 한다면, 그 샷은 정체성을 덜 담는다고 받아들이고 다음 클로즈업이 그 역할을 하게 하세요.

증상: 평범한 장면에서는 캐릭터가 맞다가, 애니메이션, 클레이 애니메이션, 필름 누아르, 강한 네온이나 모닥불 빛 같은 스타일 장면에서 바뀌어요.

원인: 스타일과 강한 색 조명은 피부톤, 머리색, 얼굴 구조를 바꿔요. 스타일 프롬프트가 강하면 레퍼런스보다 힘이 세질 수 있어요.

해결: 시리즈에 고정된 스타일이 있다면 레퍼런스도 그 스타일로 만드세요. 극단적인 조명은 얼굴이 주인공이 아닌 샷에만 쓰세요. 전체 배치를 만들기 전에 스타일 장면 하나로 먼저 테스트하세요.

증상: 긴 클립에서 캐릭터가 처음에는 맞다가 서서히 변하거나, 같은 입력으로 만든 배치에서 한 클립만 어긋나요.

원인: 긴 클립에서는 정체성 오류가 쌓이고, 모든 생성에는 무작위 요소가 있어요.

해결: 15초나 30초까지 허용하는 모델이라도, 긴 한 테이크보다 컷으로 이어 붙인 짧은 샷 여러 개를 선호하세요. 한 번 어긋난 경우에는 같은 입력으로 다시 생성하세요. 같은 문제가 반복된다면 무작위 문제가 아니므로 위의 원인 중 하나를 의심하세요.

레퍼런스 세트가 원하는 캐릭터를 만들어 내면, 모델과 포맷과 함께 그 세트를 고정하세요. 위의 해결책 대부분은 입력을 바꾸는 일이라서, 입력이 계속 달라지는 워크플로에서는 흔들림이 다시 돌아와요. RefVid에서는 캐릭터를 이미지 1~5장으로 한 번 자산처럼 저장하고, 모든 클립을 Kling 3.0 Omni에서 바로 그 세트로 생성해요. 캐릭터의 모든 클립이 한 페이지에 모여 있어서 흔들림도 금방 눈에 띄어요.