사운드 생성 AI가 불러올 미래 (feat. FALL-E)

사운드 생성 AI가 불러올 미래 (DT Quarterly, 2023년 7호)

ChatGPT가 불러온 생성 AI 돌풍

생성 AI에 대한 관심이 참 뜨겁습니다. 가우디오랩은 Sound AI 전문 기업으로서 Generative AI를 활용하여 소리를 생성하는 기술을 성공적으로 개발해 사업화를 추진 중에 있는데요. 그 내용에 대해 CSO 벤이 DT Quarterly, 2023년 7호에 글로 간략히 설명했습니다.

Sound Generation과 자연음 생성의 어려움

다양한 소리들 중에서도 ▲ 사람에 의해 생성되는 발성음 ▲ 음악의 문자나 악보처럼 소리에 직접적으로 대응되는 소리 등은 Symbolic Representation 체계가 잘 갖추어져 있습니다. 즉, 기호로서 인지하기가 상대적으로 쉬운 것인데요.

반면, 키보드 소리, 강아지 소리 등 우리 주변에서 들려오는 무수히 많은 자연음에 대한 생성은 오랜 기간 연구되지 않았습니다. 세밀한 분석 작업을 통해 소리 발생 요소 하나하나를 모델링 하는 Physical Modeling 기법의 특징상, 현실적으로 존재하는 다양한 소리를 개별적으로 모두 모델링 하여 생성하는 것은 매우 어려운 일이기 때문입니다.

그래서 가우디오랩은, Context를 이해하고 이에 대한 소리를 생성하는, ‘불가능을 가능케하는’ 기술에 집중하게 되었습니다.

가우디오랩의 AI Sound Generation인 FALL-E를 사용하면,

가우디오랩의 FALL-E는, 텍스트, 이미지, 동영상의 다양한 도메인의 데이터로부터 그 의미 및 개념에 대응되는 Context를 유추하고, AI가 이에 해당하는 사운드를 생성하는 기술입니다.

영화, OTT, 게임 등 주류 미디어 산업에서의 생산성 향상은 물론, 메타버스 플랫폼 가상 공간의 재구현 측면에서도 필수적 사용이 예상되죠.

가우디오랩의 AI Sound Generation 기술은 이러한 메타버스 플랫폼에서, 플랫폼에서 용인하고자 하는 Guideline에 따르면서도 Context에 대응되는 소리를 손쉽게 만들 수 있습니다. (FALL-E가 '폴리(Foley)'로 읽히는 것처럼...)

개방적이나 관리 가능한 솔루션으로 활용될 수 있어, 플랫폼의 저작권 문제가 해결되고 품질 상으로도 검증된 오디오를 사실상 무제한 생성하며 메타버스의 소리 경험이 혁신적으로 향상될 수 있을 것으로 기대됩니다.

DT Quaterly 7호에서 전문을 확인해보시죠 :)

→ [링크] 를 클릭하시면 이동합니다.