블랙포레스트랩스 ‘FLUX 3’ 공개…영상·오디오·로봇 동작 한 모델로 처리

독일 블랙포레스트랩스가 7월 23일 멀티모달 생성 모델 ‘FLUX 3’를 공개했다고 테크타임스가 전했다. 이 회사는 하나의 가중치를 이미지와 영상, 오디오로 동시에 학습한 뒤, 같은 구조를 로봇 동작 예측까지 확장했다. 20초 길이 영상에 소리가 함께 생성되고, 고급 이미지 편집과 공장 로봇 제어가 하나의 공유 백본에서 돌아가는 첫 대형 생성 모델이다.

기존 시장에서는 영상과 이미지, 로봇 제어를 각기 다른 모델이 나눠 담당했다. 블랙포레스트랩스는 이 구분을 한 모델로 통합했다. 회사에 따르면 클링 v3 프로와 시댄스 2.0, 런웨이 젠-4.5, 루마 레이 3.2 같은 주요 영상 모델 중 같은 구조 안에서 오디오를 함께 생성하는 모델은 없다.

7월 25일 기준 공개된 것은 FLUX 3 비디오와 FLUX 3 액션 두 가지이며, 선별된 파트너에게만 제한적으로 초기 접근을 제공한다. 영상 생성 도구는 소리와 로봇 제어까지 한 모델에서 처리하는 방향으로 확장되고 있다. 개별 모델을 조합해 쓰던 작업 방식도 바뀔 수 있다.

자세한 내용은 블랙포레스트랩스에서 확인할 수 있다.

이미지 출처: 블랙포레스트랩스