A20 LITE 'NEON'의 4DGS 는 AI 인가
최근 들어 심심해진 아이돌 시장에 이수만 할아버지가 다시 돌아와 A20 LITE이라는 그룹을 데뷔시키며 노래를 즐겁게 듣고 있습니다. 저에겐 거의 뉴진스 다음으로 이 정도 충격을 준 걸그룹은 오랜만이고, 다른걸 다 떠나서 노래 길이가 3분 53초라는 틱톡용 음원이 아닌 진짜 뭔가 음악적인 음악을 선보이려는 시작점이 좋았습니다.
다만 새로운 영상인 A2O LITE 'NEON' INFINITE Music Video 가 Ai 사용 논란이 있더라고요. 비록 AI를 연구하는 사람이지만, 저 조차도 AI 가 잘못된 방향으로 가면 큰일이 나는걸 알지만, 아쉽게도 4DGS는 AI가 전혀 아니라는 점을 뭐랄까.. 감독판으로 조금 더 길게 설명드립니다. 모르면 배우면 되는 거고, 나중에 올바른 상황에서 올바르게 화를 내는 게 올바른 팬의 태도니까요. 다만 너무 기술적인걸 길게 이야기 안할꼐요.
Gaussian Splatting 의 시작은 2000년대 이전부터 연구되던 컴퓨터 그래픽스 기술로 시작합니다. 점이나 작은 입자를 이용해서 3D 물체를 표현하려는 연구였지만, 본격적으로 난리가 난 시점은 2023년 컴퓨터 그래픽스 학회에 큰 인기를 가져간 3D Gaussian Splatting for Real-Time Radiance Field Rendering로 이어집니다. 23년간 크게 '이게 과연 실제 영상처럼 만들 수 있을까'는 단 3년 전에 나온 거죠. 이전에는 모든 걸 계산을 했지만, 23년도에 발표한 기술은 사진을 바탕으로 수많은 입자의 위치와, 크기, 색상들을 조정해서 실제처럼 보이게 만들며, 이전과 다르게 실시간에 가까운 속도로 고화질 렌더가 가능해서 꽤 큰 주목을 받았습니다.
그런데 기본적인 3DGS는 정지한 장면을 재구성하는 방식이라, 사람이 움직이는 영상까지 표현하려면 시간에 따른 변화도 다뤄야 했습니다. 그래서 공간에 시간이라는 개념을 더한 4D Gaussian Splatting 연구가 이어집니다. 단순히 이미지를 이어 붙이는 것과 달리, 움직이는 장면을 여러 시점에서 자연스럽게 볼 수 있도록 만드는 일이라 지금도 지속적인 발전이 일어나는 중입니다.
자, 본론인 ‘4DGS는 과연 AI일까요?’라는 질문에는 어떤 방식을 쓰는지에 따라 다르다고 답해야 합니다. 다만 여기서 논란이 되는 생성형 AI와는 구분해서 볼 필요가 있습니다.
예술계의 큰 파장을 일으킨 지브리 AI 사태를 기억하시나요?
지브리풍 이미지를 만들어내는 생성형 AI를 두고, 창작자의 작품과 권리를 어떻게 보호해야 하느냐는 우려가 나왔죠. 여기서 구분해야 할 건 ‘AI를 썼는가’와 ‘어떤 데이터를 어떤 권한으로 사용했는가’입니다. 둘은 연결될 수 있지만 같은 질문은 아닙니다.
다만 4DGS는 보통 촬영한 사진이나 영상을 바탕으로 장면과 움직임을 재구성하는 기술입니다. 방식에 따라 AI 신경망을 쓰기도 하고, 입력 영상에 맞춰 학습·최적화하는 과정도 있습니다. 그렇다고 반드시 타인의 작품을 대량으로 학습한 생성형 AI를 쓰는 것은 아닙니다. 물론 촬영 자료의 사용 권한과 출연자의 동의 문제는 별도로 확인해야 합니다.
예를 들면 같은 자동차 부품을 사용했다고 해서 모든 차가 같은 연료를 쓰는 건 아닌 것처럼, 신경망을 썼다는 사실만으로 학습 데이터와 제작 방식까지 같다고 볼 수는 없는 거죠.
결론만 말하면 4DGS는 기본적으로 촬영한 장면과 움직임을 재구성하는 컴퓨터 그래픽스 기술입니다.
일부 방식은 신경망을 사용하지만, 그 목적은 촬영된 장면을 다른 각도에서도 볼 수 있도록 재구성하는 것이지, 우리가 흔히 말하는 생성형 AI와 같은 것은 아닙니다. 이런 기술을 비난한다면 뮤직비디오의 모든 VFX 기술력을 욕하는 거와 똑같은 스탠스로 보이며, 지난 시간 VFX 업계에 일을 한 사람으로서 매우 안타까운 비난으로밖에 안보입니다.
AI가 좋다 나쁘다 를 욕하기 전에, 알고 욕하는 좋은 팬들이 되었으면 하는 바램으로 블로그 글을 마쳐봅니다.