Tencent의 리위타오, 월드컵 중계 방송에서 AI의 대규모 생산 첫 공개와 클라우드 제공업체들의 멀티모달 분야 진출

Tencent Cloud는 미국, 캐나다, 멕시코에서 최근 종료된 FIFA 월드컵의 기술적 핵심 인프라를 제공하여 17개 국가 및 지역의 공식 방송을 지원했습니다. 이 커버리지는 아시아태평양 지역 및 국내 시장의 모든 권한 있는 플랫폼 중 3분의 2에 도달했습니다. Tencent Cloud 부사장이자 국제 제품 기술 책임자인 리위타오는 최근 인터뷰에서 라이브 방송 제작을 위해 전례 없는 규모의 AI가 투입되었다고 강조했습니다. 이미지 향상, 지능형 디렉팅, 자동 편집, 스마트 가로-세로 변환, 품질 검사, 추적성 등 주요 프로세스가 완전히 자동화되었습니다. 단일 월드컵 행사에 대한 이러한 지원은 AIGC가 대규모 생산으로 전환되는 과정의 한 측면에 불과합니다.

리위타오는 멀티모달 공간에서 Tencent Cloud의 접근 방식을 "Harness"라고 설명합니다. 모델이 콘텐츠를 생성하는 방식에만 초점을 맞추는 대신, 이 전략은 생성부터 안정적인 사용자 전달까지 전체 공급망에 중점을 둡니다. 여기에는 전처리, 품질 검사, 스티칭, 인코딩, 배포 및 형식 적응이 포함됩니다.

그는 생성형 AI가 라이브 스트리밍, 온디맨드 시청, 미디어 제작 및 상호작용 시나리오를 포함한 멀티미디어 애플리케이션에 여러 가지 도전을 도입했다고 지적했습니다. 이러한 시나리오는 네트워크 전송, 비디오 품질, 사용자 경험 및 다양한 기능의 통합에 의해 제약되며, 단일 모델이 모든 문제를 해결하기 어렵습니다. 많은 벤더들은 새로운 멀티모달 대형 모델이 등장하는 즉시 모든 것을 연결하려고 시도하여 통합 문제와 불가피한 기술적 장벽을 초래합니다. 대부분의 회사가 유사한 도전에 직면했을 때, 고객 피드백에서 공통된 요구사항이 나타납니다. 즉, 기업들이 혁신과 상위 애플리케이션에 집중할 수 있도록 하위 작업을 처리할 수 있는 제공자가 필요하다는 것입니다. 사용자 요구를 식별하고, 적절한 모델을 선택하며, 고유의欠陥을 수정하고, 최종 서비스를 사용자에게 제공하는 것은 비디오 및 오디오 PaaS 클라우드 제공자가 해결해야 하는 핵심 과제입니다.

6월 5일, Tencent Cloud AI 산업 응용 컨퍼런스에서 회사는 AI 브랜드 "Tencent Cloud WAND"를 출시했습니다. 이 이니셔티브에는 콘텐츠 생성, 이해, 처리 및 인코딩의 전체 파이프라인을 아우르는 6개의 자체 개발 미디어 전용 모델과 60개 이상의 AI 기능이 포함됩니다. 이러한 도구는 전자상거래, 숏 드라마, 교육 및 스포츠 라이브 스트리밍과 같은 수직 시나리오를 위해 특별히 훈련되었습니다. 리위타오는 팀이 대형 언어 모델, 멀티모달 모델, 이미지 향상 또는 특정 애플리케이션을 위한 소규모 파라미터 모델을 포함한 모든 모델을 통합한다고 설명했습니다. 멀티모달 Harness에 대한 작업은 작년에 시작되었으며, 이는 생성형 비디오 모델의 부상과 Harness 개념에 대한 업계의 점증하는 합의와 시기적으로 일치합니다.

비디오 생성은 AI 코딩에 이어 상업적 폐쇄 루프를 달성한 두 번째 AI 전환 시나리오로 널리 간주됩니다. 올해 초부터 대형 모델 비디오 장면에서의 경쟁이 가속화되어 시장 구조가 크게 변화했습니다. 국내 벤더들은 상업화에서 빠르게 진전하고 있으며, ByteDance의 Seedance와 Kuaishou의 KeLing AI는 AI 비디오 생성 시장에서 독점적 지위를 형성하고 있습니다. 공개 데이터에 따르면 3월까지 KeLing AI의 ARR은 5억 달러에 가까웠으며, 이는 1년 동안 4배의 성장을 의미합니다. 다른 보고서에 따르면 6월 중순까지 Seedance 2.0의 ARR은 20억 달러에 도달했습니다. ByteDance는 수익 figures가 "지나치게 높고 현실과 일치하지 않는다"고 부인했지만, Seedance 2.0이 "생산성 전환점"을 넘었다고 확인했습니다. 한편, 해외 시장에서는 OpenAI가 3월에 Sora를 위한 독립 앱, API 인터페이스 및 ChatGPT 통합 비디오 기능을 중단하겠다고 발표하여 소비자 수준 AI 비디오 생성 시장에서 사실상 철수했습니다.

To B 제품 및 솔루션을 개발할 때 생태계 협력은 리위타오의 최우선 전략적 우선순위입니다. 그는 팀이 생성과 상호작용 간의 연결이 짧아짐에 따라 Harness의 역할이 무시되거나 우회될 수 있는지 여부를 논의해 왔다고 인정했습니다. 6개월간의 관찰을 바탕으로 그의 평가는 이러한 일이 일어나지 않을 것이며, 오히려 Harness의 중요성이 증가할 것이라는 것입니다. 대형 모델이 백엔드 생산성을 나타낸다면, 그들의 효율성 향상은 프론트엔드 애플리케이션에 대한 수요를 크게 자극할 것입니다. 수요 성장의 폭은 항상 생산성 개선보다 빠를 것이며, 이는 대형 모델이 최종 사용자 요구를 완전히 충족할 수 없음을 의미합니다. 이러한 지속적인 "수요-공급 격차"는 Harness의 필요성을 강조합니다.

리위타오는 Tencent Cloud가 멀티모달 Harness 공간에서 두 가지 주요 기회를 식별합니다. 첫째, 많은 비디오 및 오디오 시나리오가 재고찰을 필요로 합니다. 둘째, 더 강력하고 포괄적인 모델이 등장함에 따라, 도전 과제는 이를 기업급 생산 서비스에 빠르게 적용하고 최종 사용자에게 최신 대형 모델 경험을 제공하는 데 있습니다. 고객에게 최신 모델을 지속적으로 통합하고 전체 생산 프로세스 및 도구 체인을 관리하는 것은 멀티모달 Harness의 핵심 목표입니다.

작년부터 AI 컴퓨팅 파워는 훈련에서 추론으로 이동했습니다. 많은 회사들이 이제 훈련보다 추론에 더 많은 지출을 하고 있으며, 이는 수많은 AIGC 애플리케이션이 대규모 생산에 진입하고 있음을 나타냅니다. 중국에서는 숏 드라마와 애니메이션 시리즈가 멀티모달 기술이 생산에 널리 사용되는 전형적인 시나리오입니다. 아시아태평양 지역에서는 비디오 및 오디오 솔루션이 Tencent Cloud의 국제 확장에서 "전선" 역할을 하며, 수익, 시장 점유율 및 업계 인지도에서 선두를 달리고 있습니다. 지난 5년 동안 Tencent Cloud는 국제화를 우선시하며 해외에서 비즈니스 자원과 인프라에 막대한 투자를 해왔습니다. 회사는 해외 사업이 지난 3년 동안 두 자릿수 성장을 유지했다고 밝혔습니다.

Tencent Cloud 비디오 및 오디오 총괄 책임자 리즈청에 따르면, 숏 드라마, 애니메이션 시리즈, 전자상거래 또는 도구 기반 시나리오에 관계없이 클라이언트는 초기에는 효과성과 영향력을 우선시하지만 이후에는 ROI, 즉 기술이 수익을 생성하고 가치를 창출하는지에 초점을 맞춥니다. 현재 가장 빈번한 문의는 숏 드라마 및 전자상거래 도구에 관한 것으로, 이는 향후 1-2년 내에 널리 보급될 것으로 예상됩니다. 많은 사용자와 기업들은 대형 언어 모델이 한때 수직 산업에 국한되었지만 이제는 일상적인 업무에 필수적이고 보편화된 것과 유사하게 이러한 기술을 채택할 것입니다.

에이전트 시대의 도래와 함께, Tencent Cloud의 기능은 비디오 및 오디오 인텔리전스, AI 하드웨어, 구현 로봇 및 클라우드 폰과 통합될 것입니다. 글로벌 인프라와 엣지 추론을 활용하여 이러한 솔루션은 AI 애플리케이션의 빠른 글로벌 배포를 지원할 것입니다. 리위타오는 팀이 Zhuji와 같은 여러 구현 지능 및 자율 청소 차량 회사와 협력하여 TRRO 원격 실시간 제어(원격 디지털 휴먼 솔루션)를 개발했다고 언급했습니다. 이는 약한 네트워크 조건에서 수동 개입 중 저지연 안정적 통신 및 오디오-비디오 데이터 전송과 같은 핵심 문제를 해결합니다.

앞으로 리위타오는 멀티모달 분야에서 클라우드 제공자 간의 경쟁에 대한 세 가지 주요 방향을 제시합니다. 첫째는 멀티모달 훈련 및 컴퓨팅 파워입니다. 언어 모델 훈련과 달리, 멀티모달 분야에서의 투자의 상당 부분은 콘텐츠를 이해하고 생성하는 데 사용됩니다. 미래의 엔드투엔드 음성 상호작용 및 비디오 생성은 클라우드 제공자에게 상당한 컴퓨팅 파워와 인프라 투자를 필요로 할 것입니다. 둘째는 스토리지 및 데이터 축적입니다. 멀티미디어는 텍스트보다 더 높은 스토리지 용량을 요구하며, 안정성, 데이터 정제 및 획득에 대한 고유한 요구사항이 있습니다. 대량의 비디오 데이터는 사전 훈련 전에 정제되고 처리되어야 하며, 서로 다른 모달리티를 결합하는 것은 텍스트 기반 작업과 크게 다른 처리 단계를 포함합니다. 셋째는 애플리케이션 생산 측면입니다. 엔드 사용자 지향적 추론 서비스와 포괄적인 처리 기능을 제공하는 클라우드 제공자는 고객 선택의 핵심 요소입니다. 운영 혁신 트렌드에 의해驱动的 고객 요구를 효과적으로 충족하는 것은 Tencent Cloud에게 equally critical합니다.