구글 딥마인드는 비디오-오디오 생성 기술에서 매우 흥미로운 돌파구를 만들었습니다. 새로운 모델은 장면의 음향을 일치시키는 무음 클립을 추가하고, 화면 상의 행동을 동반하며, 더 많은 기능을 제공할 수 있습니다.

그들이 공유한 예시들은 이 모델의 인상적인 기능을 보여줍니다. 늑대 울부짖기, 해질녘 하모니카 연주, 무대에서 연주하는 드러머와 함께 깜빡이는 조명과 환호하는 군중 등의 사실적인 음향 효과를 생성할 수 있습니다. 오디오는 시각적 단서와 seamlessly 동기화되어 매우 설득력 있고 몰입감 있는 경험을 만들어냅니다.

이 기술이 특히 주목할 만한 점은 단순한 음향 효과를 넘어선다는 것입니다. 이 모델은 비디오 픽셀과 텍스트 프롬프트를 활용하여 화면 비주얼을 진정으로 보완하는 풍부하고 역동적인 사운드트랙을 생성합니다. 이는 텍스트 프롬프트만으로 오디오를 생성하는 기존 시스템에 비해 큰 진전입니다.

구글의 접근 방식은 더 통합되고 일관된 오디오-비주얼 경험을 가능하게 하며, 사운드 디자인이 전체 콘텐츠를 향상시킵니다. 이는 영화 제작, 비디오 제작, 대화형 경험, 가상 환경 등 다양한 분야에 큰 영향을 미칠 수 있습니다.

구글이 이 기술을 계속 개발하고 개선함에 따라, 창작자와 개발자들이 이를 활용하여 오디오-비주얼 스토리텔링과 콘텐츠 제작의 경계를 확장하는 것을 보는 것이 기대됩니다.

구글은 연구소에서 AI 제품 공장으로 큰 전환을 이루었습니다. 이 전환은 안전성에 초점을 맞추고 제품을 서두르지 않으면서도 업계의 급속한 AI 개발 속도를 따라잡아야 하는 어려운 과제였습니다.

회사는 자신의 작업을 대중에게 선보이고 싶어 하는 사람들이 Anthropic이나 다른 AI 스타트업으로 떠나면서 연구원들을 지속적으로 잃고 있습니다. 이 "두뇌 유출"은 구글이 AI 연구와 개발의 선두 주자로 자리매김하는 데 큰 문제가 되고 있습니다.

이러한 어려움에도 불구하고 구글은 두 AI 연구소를 통합하여 상업적 서비스를 개발하고 있습니다. 이 움직임은 제품 개발에 초점을 맞추면서 기초 연구의 장기적 강점을 약화시킬 수 있습니다. 상업화 추진에 대한 내부의 불만은 지난 2년간 제너레이티브 AI를 소비자에게 제공하는 데 어려움을 겪어온 회사의 내부 비판을 반영합니다.

전반적으로 구글은 연구 노력과 AI 제품 개발 및 출시 사이의 균형을 잡아야 하는 어려운 상황에 처해 있습니다. ChatGPT 등 최신 시스템과 경쟁할 수 있는 AI 제품을 개발하고 출시할 수 있을지 지켜볼 것입니다.

콘텐츠 창작을 높이기 위해 TikTok은 Symphony라는 새로운 창의적 AI 스위트를 도입했습니다. Symphony는 인간의 상상력과 AI 기반 효율성을 결합하여 TikTok의 기존 창의적 보조 기능을 진화시킵니다.

AI 기반 가상 보조 기능은 트렌드와 모범 사례를 분석하고 이러한 통찰력에 부합하는 콘텐츠를 생성하여 사용자가 더 나은 동영상을 만들 수 있도록 돕습니다. 사용자는 제품 정보와 미디어 자산을 가져올 수 있으며, Symphony는 TikTok에 최적화된 콘텐츠를 신속하게 생성합니다.

Symphony는 완전히 AI 생성 콘텐츠를 만들지는 않지만, 사용자 입력과 AI를 합성하여 대규모로 콘텐츠를 생산합니다. 이 접근 방식은 순수 AI 생성 콘텐츠의 문제점을 피하면서 창작자의 시간을 절약하는 것을 목표로 합니다.

Symphony는 자동 번역 및 더빙을 통한 글로벌 도달력과 상업적 용도의 사전 구축 AI 아바타 라이브러리와 같은 기능도 제공합니다. 이러한 도구는 언어 장벽을 해소하고 브랜드가 자사 제품을 소셜 미디어에 효과적으로 선보일 수 있는 비용 효율적인 솔루션을 제공합니다.

전반적으로 TikTok의 Symphony는 인간의 창의성과 AI 기반 효율성을 결합하여 사용자와 브랜드의 소셜 미디어 활동을 지원하는 콘텐츠 창작 기능의 진화를 나타냅니다.

Meta는 많은 오픈 모델을 출시했으며, 이는 AI 커뮤니티에 큰 영향을 미칠 것으로 예상됩니다. 이 모델들은 게임 체인저는 아니지만 향후 혁신과 발전을 이끌 것입니다.

Meta의 최신 연구 모델과 데이터셋을 공유하는 접근 방식은 오픈 사이언스와 자사 연구 성과의 공개 공유에 대한 오랜 약속의 일부입니다. 이 움직임은 커뮤니티가 더 빠르게 혁신하고 새로운 연구를 개발할 수 있도록 하는 것을 목표로 합니다.

Meta가 공개한 주요 모델과 기술은 다음과 같습니다:

1. Multi-Token Prediction Model: 여러 출력을 동시에 추론할 수 있는 모델로, 더 빠른 추론이 가능합니다.
2. Meta Chameleon: 이미지와 텍스트를 조기 융합 아키텍처로 추론할 수 있는 모델로, 더 통합된 접근 방식을 가능하게 합니다.
3. Meta Audio Seal: AI 생성 음성을 식별하고 위치를 특정할 수 있는 새로운 오디오 워터마킹 기술입니다.
4. Meta Jukebox: 화성과 템포에 대한 더 나은 조건화를 통해 음악 생성을 가능하게 하는 기술입니다.
5. Prism Dataset: 지리적, 문화적 다양성을 향상시킬 수 있는 데이터셋입니다.

Meta의 이러한 공개는 오픈 소스 커뮤니티에 대한 헌신과 이 분야의 선도자가 되고자 하는 의지를 보여줍니다. 이러한 강력한 모델과 기술을 제공함으로써 Meta는 커뮤니티가 자사의 작업을 기반으로 더 발전할 수 있도록 지원하고 있습니다.

Meta의 오픈 소스 접근 방식은 다른 일부 기술 기업들의 폐쇄적인 접근 방식과 대조됩니다. 이 움직임은 AI 커뮤니티에 환영받을 것으로 보이며, 혁신과 협력을 촉진하여 결국 이 분야에서 더 큰 돌파구를 이끌어낼 것입니다.

Runway는 새로운 대규모 멀티모달 인프라에서 학습된 모델 시리즈의 첫 번째인 Gen 3 Alpha를 소개했습니다. 이 모델의 두드러진 특징은 텍스트 프롬프트에서 사실적인 인간 캐릭터를 생성할 수 있는 능력입니다.

Gen 3 Alpha의 텍스트-비디오 출력은 매우 인상적이며, 생성된 인간 캐릭터가 매우 사실적이고 자연스럽습니다. DALL-E나 Stable Diffusion과 같은 다른 모델과 비교하면, Runway의 사실적인 인간 생성 결과물에는 결함이 적어 실제 영상과 구분하기 어려워 보입니다.

이러한 발전은 AI 생성 콘텐츠 분야에서 중요한 이정표를 나타내며, 현실과 환상의 경계를 모호하게 만듭니다. 출력물의 높은 품질은 콘텐츠 생성과 검증에 대한 잠재적 영향을 제기하며, 무엇이 실제이고 무엇이 AI 생성인지 구분하기가 점점 어려워지고 있습니다.

Runway는 아직 Gen 3 Alpha를 대중에게 공개하지 않았지만, 제공된 미리보기를 통해 회사가 텍스트-비디오 생성 기술의 선두에 있음을 알 수 있습니다. 이 분야의 경쟁이 치열해짐에 따라 Runway의 모델이 향후 출시될 다른 모델들과 어떻게 비교되며 업계가 계속 발전해 나갈지 지켜볼 만합니다.

Hedra Labs는 AI 비디오 생성의 핵심 과제인 신뢰할 수 있는 클로즈업 생성과 감정적으로 반응하는 캐릭터 문제를 해결하는 혁신적인 연구 모델 "Character One"을 소개했습니다.

Hedra.com에서 이용할 수 있는 이 모델은 매우 사실적이고 감정적으로 표현력 있는 클로즈업을 생성할 수 있어, 창작자들이 AI 기반 캐릭터를 통해 더 매력적인 이야기를 전할 수 있게 합니다. 이는 AI 시스템이 이 과제에 어려움을 겪어왔다는 점에서 큰 진전입니다.

한 예시에서는 모델의 기능을 보여줍니다. 비디오에서 "Dave"라는 AI 생성 캐릭터가 자신의 故 아버지에 대한 진심 어린 메시지를 전달하는데, 표정 표현과 감정적 전달이 매우 자연스럽고 생동감 있게 나타납니다. 음성, 안면 움직임, 감정의 미묘한 뉘앙스가 seamlessly 통합되어 있는 것은 이 모델의 정교함을 보여줍니다.

이 기술은 더 몰입감 있고 신뢰할 수 있는 AI 기반 내러티브를 개발할 수 있게 하여 콘텐츠 창작을 혁명할 잠재력이 있습니다. 현실과 환상의 경계가 계속 모호해짐에 따라 Hedra Labs의 돌파구는 인간-AI 상호작용의 미래와 이러한 발전의 윤리적 영향에 대한 중요한 질문을 제기합니다.

테슬라 CEO 일론 머스크는 회사의 고급 인공지능(AGI) 및 옵티머스 휴머노이드 로봇 개발 진척에 대해 과감한 주장을 했습니다.

머스크는 테슬라 차량 사용자들이 AGI에 접근하여 식료품 구매나 친구 픽업 등 다양한 작업을 수행할 수 있게 될 것이라고 말했습니다