Алгоритм Tora от Alibaba основан на технологии OpenAI

Китайский технологический гигант Alibaba разрабатывает новый инструмент для генерации видео под названием Tora, основанный на технологии Sora. Информация об этом стала известна благодаря изданию SCMP. Работа над платформой ведется на базе архитектуры Diffusion Transformer DiT, которая является основой нейросети OpenAI, представленной в феврале.

Согласно публикации, специалисты Alibaba создают пространство под названием DiT, которое ориентировано на траекторию для генерации видео. Суть данного подхода состоит в том, что движения, созданные с помощью Tora, точно следуют заданной траектории, воспроизводя таким образом динамику физического мира. Это означает, что вектора перемещения следуют по заранее определенной траектории, что позволяет создавать реалистичные и точные видеоматериалы.

Помимо этого, процесс OpenSora был адаптирован для преобразования сырых, необработанных видеоматериалов в определенные видео пары (видеоты). Это дает возможность наиболее эффективно использовать существующие данные, одновременно повышая качество конечного продукта.

Не следует забывать, что Alibaba не является единственной компанией, работающей над подобными решениями. Многие технологические гиганты в настоящее время активно исследуют и разрабатывают подобные алгоритмы и инструменты. Однако благодаря мощной поддержке OpenAI, Alibaba обеспечивает технологический прорыв, позволяющий ставить новые стандарты в индустрии генерации видео.

Ожидается, что этот инструмент сможет значительно облегчить процесс создания видеоматериалов, в том числе в сфере маркетинга и рекламы, где видеоиграет важную роль. Как минимум, это поможет экономить время и ресурсы, которые обычно уходят на многократные итерации и корректировки при создании видео.

Процесс продолжается, и мы будем следить за дальнейшими новостями о развитии Tora. В любом случае, одно ясно уже сейчас: развитие технологий генерации видео представляет собой важный шаг вперед в цифровой и визуальной коммуникации.

---