실시간
뉴스

AI

말 한마디로 영상 찾고 편집까지… 트웰브랩스, 영상 AI 에이전트 출시

트웰브랩스는 영상 AI 에이전트 'Jockey'를 출시했다고 10월16일 밝혔다. [사진=트웰브랩스]

[디지털데일리 구아현기자] 쌓인 영상 속에서 필요한 장면을 찾으려면 일일이 돌려봐야 했다. 이제는 AI에게 말로 시키면 장면을 찾고 편집본까지 만들어 준다.

트웰브랩스는 영상 이해 AI 에이전트 ‘자키 바이 트웰브랩스(Jockey by TwelveLabs)’를 정식 출시했다고 16일 밝혔다. 자체 개발한 영상 이해 AI 모델 위에서 작동한다. 트웰브랩스는 모델에 이어 실제 업무를 처리하는 에이전트까지 갖추게 됐다.

영상은 글처럼 검색되지 않는다. 장면을 찾으려면 직접 돌려보거나 제목, 태그, 자막에 기대야 했다. 영상이 늘수록 찾고 고르고 편집하는 데 드는 시간과 비용도 함께 늘었다.

자키는 이 과정을 대신한다. 사용자가 평소 말로 요청하면 영상 전체에서 관련 장면을 찾아 왜 골랐는지 설명한다. 조회수와 좋아요가 많은 클립을 먼저 추리거나, 필요한 장면만 이어 붙여 가편집본을 만들 수도 있다.

개발 지식이 없어도 쓸 수 있다. 오픈AI의 챗GPT나 앤트로픽의 클로드 앱에서 자키를 불러 대화하듯 쓰면 된다. 두 앱을 오가도 검색 흐름은 이어진다. 개발자는 API로 자키를 자사 서비스에 연동할 수 있다.

정식 출시에 앞서 콘텐츠 제작사들과 시범 운영을 거쳤다. 이때 받은 의견을 반영해 소셜 영상 분석 기능을 더했다. 유튜브, 틱톡, 인스타그램 릴스 영상의 링크를 넣으면 요즘 반응을 얻는 흐름을 분석하고 영상별 반응 지표를 함께 보여준다. 자키가 만든 편집본이나 분석 자료는 근거 영상과 함께 저장해 팀원과 공유할 수 있다.

트웰브랩스는 앞서 영상 이해 모델 ‘페가수스 1.6’도 공개했다. 사람 눈높이에서 찍은 1인칭 영상을 더 잘 이해하도록 개선한 모델이다. 이런 영상은 로봇 학습용 데이터로 쓰인다.

디지털데일리 네이버 메인추가