세스 포스 그렌Riffusion의 공동 창립자이자 CEO는 텍스트 프롬프트에서 오디오 트랙을 생성하는 AI 기반 음악 생성 도구의 개발을 이끌고 있습니다. Riffusion을 통해 사용자는 다양한 음악 스타일과 사운드를 실시간으로 실험 할 수 있으므로 음악 제작을보다 쉽게 접근 할 수 있습니다. 창의성과 사용 편의성을 위해 설계된이 플랫폼은 누구나 공식적인 음악 전문 지식없이 AI 생성 음악을 탐색 할 수 있습니다.
반동 개인적으로 시도한 최고의 AI 음악 생성기이며 AI 생성 음악에 관심이있는 사용자에게 권장하는 도구입니다.
우리를 재심의 초기 시절로 데려 갈 수 있습니까? AI 음악 생성 도구를 구축하게 한 초기 스파크는 무엇입니까?
Riffusion은 두 명의 평생 음악가 사이의 전체 취미 프로젝트로 시작되었습니다. 저의 공동 설립자 인 Hayk와 저는 10 년 넘게 아마추어 밴드에서 함께 연주 해 왔으며, 우리는 항상 창조적 인 행동에 매료되었습니다. 어느 날 오후 우리는 뒷마당에 노래를 쓰고 있었고 영감을 찾기 위해 초기 AI 모델을 사용하여 이미지를 생성 할 수있는 초기 AI 모델로 연주하기 시작했습니다. 그러나 우리가 정말로 원했던 것은 우리와 함께 음악을 만들 수있는 도구였습니다. 우리가 공동 작업 할 수있는 AI는 아무도 들어 본 적이없는 새로운 멜로디와 소리를 낼 수있었습니다. 당시에는 그와 같은 것이 없었기 때문에 우리는 다른 누구보다 우리 자신을 위해 그것을 만들려고 노력했습니다.
본격적인 회사가 될 가능성이 있다는 것을 어느 순간에 알았습니까?
전환점은 우리가 취미 프로젝트를 몇 명의 친구들과 공유했을 때 왔으며, 어디에서나 미친 바이러스에 빠지지 않았습니다. 전문 음악가, 제작자 및 수백만 명의 일상 음악 애호가들이 우리가 결코 예상하지 못했던 방식으로 참여하고있는 것은 기술자 나 AI 애호가뿐만 아니라 관심이있었습니다. 세계에서 우리가 가장 좋아하는 아티스트 중 일부는 Riffusion을 사용하여 만든 샘플로 연락하기 시작했습니다!
이 프로젝트는 또한 Google, Bytedance 및 다른 사람들의 최고의 연구 실험실에서 우리의 작업을 기반으로 자신의 AI 음악 노력을 돌리도록 영감을 주었으며, 이것이 단순한 실험이 아니라는 것이 분명했습니다. 훨씬 더 큰 무언가의 기초였습니다. 회사로서, 우리는 이제이 새로운 악기를 어디에서나 창조적 인 사람들에게 가져올 기회를 얻었습니다.
실험에서 상업용 제품으로의 반동을 전환 할 때 직면 한 가장 큰 기술 및 비즈니스 과제는 무엇입니까?
기술적 인 측면에서 우리는 먼 길을 왔습니다. 우리의 첫 번째 모델은 저 충실도 음악의 거친 5 초 스 니펫을 생성했으며, 이제는 통제력과 표현력이 뛰어난 전장의 고품질 노래를 생성 할 수 있습니다. 이로 인해 모델 아키텍처에서 큰 발전을 이루었고 처음부터 끊임없이 물건을 다시 생각했습니다. 우리 팀의 놀라운 연구원들에게 우리가 지금까지 왔으며, 우리는 이것이 기술에서 가능한 것의 시작일 뿐이라는 것을 알고 있습니다.
비즈니스 측면에서, 우리는 음악 산업 내에서 리포 션이 어디에 맞는지 깊이 생각해야했습니다. AI 음악은 여전히 새롭고 아마추어 제작자와 전문가 모두가 놀라운 채택을보고 있지만 AI와 인간의 창의성이 어떻게 공존 할 수 있는지에 대한 지속적인 대화가 있습니다. 우리의 초점은 항상 음악가들에게 힘을 실어주는 데 도움이되어 왔으며, 사람들에게는 불가능한 방식으로 창의성을 탐구 할 수있는 새로운 도구를 제공합니다.
Riffusion은 원래 짧은 뮤지컬 리프를 생성하는 데 중점을 두었지만 이제는 전장 조각을 구성 할 수 있습니다. 기능을 확장 할 수있는 진보는 무엇입니까?
우리는 자신의 기초 모델을 처음부터 훈련함으로써 Riffusion의 출력의 품질, 표현성 및 제어 가능성을 향상시킬 수있었습니다. 최신 모델 인 Fuzz의 개발 및 출시와 함께 주요 획기적인 획기적인 발전이 이루어졌습니다. 블라인드 테스트에서 Fuzz는 동일한 가사와 사운드 프롬프트가 제공 될 때 경쟁 모델을 지속적으로 능가하며 모델은 사용자가 개인 사운드를 찾는 데 도움이되도록 고유하게 설계되었습니다. 사용자가 리프 션을 사용하여 더 많은 시간을할수록 개인의 취향을 배우고, 개인의 취향을 배우고, 더 많은 시간을 배우고 있습니다. 생성 된 음악이 더 개인화 될수록됩니다. 우리는 이것을 반응의 큰 차별화 요소로 본다.
많은 AI 음악 모델은 음악의 감정적 깊이를 유지하는 데 어려움을 겪고 있습니다. Riffusion은 다른 분위기와 스타일의 뉘앙스를 어떻게 포착합니까?
음악은 매우 개인적이고 감정적이며, 우리는 인간 수준에서 공명하는 음악을 생성하기 위해 반동을 원합니다. Alex Pall 고문은 다음과 같이 말합니다.“이것은 소리를내는 것이 아닙니다. 사람들이 소리를 통해 특별한 느낌을 느끼게하는 것입니다.”
잘 만들어진 바이올린이 아티스트가 자신을 완전히 표현할 수 있도록 힘을 실어 줄 수있는 것처럼, 우리는 모델을 매 턴마다 사용자의 창의성에 의해 안내되는 악기로 훈련시킵니다. 멜로디, 텍스트 프롬프트, 심지어 이미지를 입력하든, 리프 션은 의도에 적응하여 다른 분위기, 역학 및 스타일 선택을 반영하기 위해 출력을 형성합니다. 우리는 플랫폼에서 정말 놀라운 음악을 만들기 위해 매일 돌아 오는 사용자에게 중점을 둡니다.
AI 생성 음악이 계속 발전함에 따라 인간의 창의성을 대체하기보다는 어떻게 보완하는 것을 보십니까?
AI는 대체품이 아니라 뮤지션을위한 악기입니다. 역사를 통해 신디사이저에서 디지털 오디오 워크 스테이션에 이르기까지 새로운 음악 도구는 아티스트가 인간 예술을 줄이지 않고 만들 수있는 것을 확장했습니다. Riffusion은 같은 철학을 따릅니다. 우리는 Riffusion을 음악가들이 실험, 공동 작업 및 새로운 형태의 스토리 텔링을 시도하도록 장려하는 악기로보고 있습니다. 예술가들은 여전히 영혼과 의도를 자신의 음악에 가져오고 AI는 그러한 아이디어를 생생하게 할 수 있도록 도와줍니다. 우리는 많은 전문 음악가와 애호가들이 매일이 도구를 수용하고 창조적 인 과정에서 기쁨을 찾고 있다는 것을 기쁘게 생각합니다.
음악가와 프로듀서는 Riffusion의 능력에 어떻게 반응 했습니까? 도구의 예상치 못한 또는 혁신적인 사용을 보셨습니까?
반응은 꽤 놀랍습니다. 몇 년 전에이 도구를 사용하기 시작한 몇몇 사람들이 있었지만 매주 기술을 수용하는 전문 음악가와 프로듀서의 수는 극적으로 확장되고 있습니다. 우리는 아티스트가 새로운 멜로디를 브레인 스토밍하고 새로운 사운드를 만들고 전체 앨범을 작성하기 위해 Riffusion을 사용하는 것을 보았습니다. 일부는 Riffusion 세대를 라이브 악기와 혼합하여 완전히 새로운 장르를 만들었습니다. 가장 흥미로운 것 중 하나는 사람들이 자연의 소리에서 음악을 생성하거나 실험 구성을 테스트하거나 영화 작품을 득점하는지 여부에 관계없이 사람들 이이 도구를 취하고 자체적으로 만드는 방법을 보는 것입니다.
Riffusion이 긴 형식의 음악을 만들 수 있으므로 영화, 비디오 게임 또는 기타 미디어에서 AI 생성 점수에 대한 잠재력이 있습니까?
긴 형태의 음악을 생성하는 능력은 확실히 더 큰 미디어 환경을위한 강력한 도구입니다. 우리는 이미 영화 제작자, 게임 개발자 및 자신의 이야기에 적응하는 독특한 점수를 원하는 컨텐츠 제작자의 관심을보고 있습니다. AI가 스토리 텔러가 양식에 걸쳐 자신을 표현할 수 있도록 도울 수 있다는 것은 분명하며, 우리는이 프론티어의 시작에 있습니다.
앞서 살펴보면 리프 션에 대한 궁극적 인 비전은 무엇이며 음악 창작의 미래를 형성하는 방법을 어떻게 보십니까?
오늘날, 사람들의 작은 부분만이 음악을 만들지 만 창의성은 우리 모두에게 내재되어 있습니다. 입력 장벽을 낮추는 도구를 구축하면서 소리로 가능한 천장을 올리면 Riffusion이 향후 중요한 도구가 될 것입니다. 나는 음악을 만들고 실험하고 연결하려는 모든 사람을위한 리프 션을 볼 수 있습니다. 당신이 전문 프로듀서이거나 전에 노래를 만든 적이없는 사람이든, 우리는 당신의 소리를 찾는 데 도움이되는 도구가되기를 원합니다.
훌륭한 인터뷰에 감사드립니다. 음악을 생성하는 데 관심이있는 사용자는 방문해야합니다. 반동.
게시물 Seth Forsgren, Riffusion의 공동 창립자이자 CEO-인터뷰 시리즈 먼저 나타났습니다 Unite.ai.
