Fugatto,World’s Most Flexible Sound Machine Debuts

​NVIDIA의 Fugatto는 텍스트와 오디오 입력을 기반으로 음악, 음성, 사운드를 생성하거나 변형할 수 있는 혁신적인 생성형 AI 모델입니다. 이 모델은 다양한 오디오 생성 및 변형 작업을 지원하며, 사용자가 텍스트 프롬프트를 통해 원하는 사운드를 직접 제어할 수 있도록 설계되었습니다.

주요 기능:

• 텍스트 기반 오디오 생성: 사용자는 텍스트 프롬프트를 입력하여 특정한 음악이나 사운드를 생성할 수 있습니다. 예를 들어, "전자 음악과 함께 개들이 짖는 소리"와 같은 지시를 통해 해당 사운드를 만들어낼 수 있습니다.
• 오디오 변형: 기존의 오디오 파일을 입력하여 악기를 추가하거나 제거하고, 목소리의 억양이나 감정을 변경하는 등 다양한 변형이 가능합니다. 예를 들어, 피아노로 연주된 멜로디를 사람의 목소리로 변환하거나, 음성 녹음의 억양을 바꿀 수 있습니다.
• 독창적인 사운드 생성: Fugatto는 이전에 들어본 적 없는 새로운 사운드를 생성할 수 있습니다. 예를 들어, 트럼펫이 고양이 소리를 내는 등 독특한 사운드를 만들어낼 수 있습니다.

기술적 특징:

Fugatto는 25억 개의 파라미터를 가진 트랜스포머 모델로, NVIDIA의 DGX 시스템에서 훈련되었습니다. 이 모델은 다양한 오디오 샘플과 텍스트 데이터를 활용하여 훈련되었으며, 이를 통해 사용자의 지시에 따라 다양한 오디오 작업을 수행할 수 있습니다.

활용 분야:

• 음악 제작: 음악 프로듀서들은 Fugatto를 활용하여 새로운 아이디어를 빠르게 프로토타입으로 만들거나, 다양한 스타일과 악기를 시도해볼 수 있습니다.
• 게임 및 영화 산업: 게임 개발자나 영화 제작자들은 Fugatto를 통해 독특한 사운드 효과를 생성하거나, 캐릭터의 목소리를 변형하는 등 다양한 오디오 작업을 수행할 수 있습니다.
• 광고 및 미디어: 광고 제작자들은 Fugatto를 활용하여 특정한 분위기나 감정을 전달하는 사운드를 생성하거나, 다양한 언어와 억양의 음성을 만들어낼 수 있습니다.

출시 정보:

현재 NVIDIA는 Fugatto의 공개 출시 일정에 대해 구체적인 계획을 밝히지 않았습니다. 이는 생성형 AI 기술의 잠재적 오용 가능성에 대한 우려 때문이며, 안전한 공개 방안을 검토 중인 것으로 알려졌습니다.

참고 자료:

• NVIDIA 블로그: Fugatto, 세계에서 가장 유연한 사운드 머신의 데뷔
• The Verge: NVIDIA claims a new AI audio generator can make sounds never heard before
• Reuters: NVIDIA shows AI model that can modify voices, generate novel sounds

Fugatto는 오디오 생성 및 변형 분야에서 새로운 가능성을 열어줄 것으로 기대되며, 다양한 산업 분야에서의 활용이 주목됩니다.