한국딥러닝, 서강대·경희대·더프롭 등과 3D·전통문화 협업 5건 체결

한국딥러닝이 2023년 10월 한 달 동안 3D와 전통문화를 잇는 협업 다섯 건을 연이어 맺었다. 서강대학교 메타버스전문대학원, 경희대학교, 영화 소품 제작사 더프롭, 한국전통문화전당, 한국문화재재단이 상대다. 과학기술정보통신부와 한국지능정보사회진흥원(NIA)의 데이터 구축사업 주관사로 쌓은 3D 데이터 역량을 학계와 문화기관, 콘텐츠 제작 현장으로 넓힌 한 달이었다.

영화 소품 수천 점을 3D 애셋으로 바꾸는 더프롭 협업

더프롭과는 소품 컬렉션을 3D로 제작하는 협업을 시작했다. 더프롭은 국내 영화 산업을 이끄는 3대 소품 제작사 가운데 하나로, 20년간 영화 소품을 맡아 온 소품 담당자가 세운 회사다. 영화와 드라마를 비롯한 여러 분야에서 쓰인 수천 개의 소품을 보유하고 있으며, 80년대 한국 스타일의 구조물과 사실적인 한국 소품이 많아 한국적인 콘텐츠 제작에 중요한 자산으로 꼽힌다.

한국딥러닝은 포토스캔 기반 3D 모델 생성 기술로 이 컬렉션을 디지털 3D 애셋으로 바꾼다. 변환된 애셋은 2023년 8월 한국딥러닝이 베타 출시한 3D 애셋 플랫폼 '폴리그라운드(POLYGROUND)'에서 공개된다. 영화와 시각효과 제작사가 사실적인 장면을 더 쉽게 구현하고, 제작 시간과 비용을 줄이는 데 쓰일 것으로 기대된다.

전통공예와 문화유산을 디지털로 보존하는 두 기관

한국전통문화전당과는 전통공예의 디지털 전환을 위한 협업 프로젝트를 발표했다. 전주 한옥마을에 있는 한국전통문화전당은 전통문화의 현대적 재해석과 대중화·산업화·세계화를 맡는 기관이다. 한국딥러닝은 전당이 보유한 전통 공예품을 3D 디지털 형태로 변환해 공예 작가들의 작품을 보존하고, 실감형 전시와 현대 아트에 활용할 계획이다. 한국문화재재단과는 문화유산의 디지털 보존을 위한 협업을 진행한다.

두 기관은 이미 한국딥러닝과 같은 사업을 수행해 온 파트너다. 한국딥러닝은 2023년 과기정통부·NIA '인공지능 학습용 데이터 구축 지원사업'의 '한국형 텍스트 3D 객체 쌍 데이터' 과제를 주관하고 있으며, 서강대학교 산학협력단과 한국문화재재단, 한국전통문화전당이 컨소시엄으로 참여했다. 총사업비 18억 원 규모로, 한국 전통 공예품과 장신구 등 일상에서 볼 수 있는 물품을 촬영·스캔하고 텍스트를 붙여 학습용 3D 객체와 텍스트·메타데이터를 6,000개 이상 구축한다. 한글이나 영문 텍스트만 입력해도 한국형 3D 객체를 생성할 수 있게 하는 것이 목표다.

"ChatGPT를 비롯한 생성형 인공지능의 등장으로 관련 산업이 빠르게 발전하고 있습니다. 공예품 대상 학습용 데이터 개발과 실용화의 초석을 마련하겠습니다."

— 김도영 한국전통문화전당 원장

서강대·경희대와 만드는 한국형 생성 모델

학계와의 협력도 이어졌다. 서강대학교 메타버스전문대학원과는 3D 애셋 구축을 위한 협약을 맺었다. 경희대학교와는 한국풍 채색화 생성모델 개발에 협력한다. 기존 생성형 AI가 서양화 중심의 데이터로 학습돼 수묵화와 수묵 채색화 같은 한국화의 생성 품질이 낮다는 문제의식에서 출발한 협력이다. 한국딥러닝은 2022년에도 경희대학교가 주관한 '한국 전통 수묵화 화풍별 제작 데이터' 구축에 컨소시엄 참여기관으로 함께했다.

한국형 3D 애셋이 부족하고 동양풍 애셋이 대부분 일본풍에 치우쳐 있다는 점은 한국딥러닝이 이 분야에 공을 들이는 이유다. 다섯 건의 협업은 한국 문화의 특성을 담은 데이터를 확보하고, 그 데이터를 방송과 커머스, 게임, AR·VR 등 콘텐츠 산업에서 쓸 수 있는 애셋과 생성 모델로 바꾸는 작업으로 이어진다.