 |
Новый инструмент ByteDance уверенно превосходит всех конкурентов. Фото: ByteDance . |
ByteDance, материнская компания TikTok и Douyin, только что официально представила Seedance 1.0 — инструмент на основе искусственного интеллекта (ИИ), способный создавать видео из текста и изображений. Это считается важным шагом китайской технологической группы в гонке за разработку платформы для создания контента на основе ИИ.
Недавно компания опубликовала подробную исследовательскую работу по Seedance 1.0, разработанному для преобразования простых инструкций в высококачественные видео без необходимости в подробных сценариях или сложных командах. Инструмент не только обрабатывает отдельные кадры, но и объединяет несколько ракурсов, обеспечивает плавные переходы и обеспечивает единообразие персонажей на протяжении всего видео.
«Мы нашли способ разделить пространственную и временную информацию в видео. Эта технология использует уникальный метод «кодирования» местоположения, позволяя ИИ научиться генерировать видео из текста и изображений в рамках одной модели. В результате ИИ может автоматически и плавно генерировать видео с различными сценами», — говорится в исследовательской статье ByteDance.
ByteDance уверенно заявляет, что Seedance 1.0 превосходит существующие на рынке инструменты для создания видео на базе ИИ, особенно по своей способности точно следовать идеям пользователя, четкости изображения и естественности движений персонажей.
По данным Artificial Analysis — платформы, специализирующейся на анализе и оценке эффективности моделей искусственного интеллекта, Seedance 1.0 превзошёл другие инструменты ИИ для генерации видео, такие как Google Veo 3, Kuaishou Kling 2.0 и OpenAI Sora. Этот инструмент демонстрирует выдающуюся производительность как при преобразовании текста в видео, так и при преобразовании изображений в видео.
Компания также сообщила, что Seedance 1.0 обучался на огромном наборе видеоданных, собранном из общедоступных и лицензированных источников. Обучающие видео прошли строгую фильтрацию для удаления жестокого или деликатного контента.
Многие считают, что основными источниками данных являются TikTok и Douyin — две платформы, которыми управляет сама ByteDance.
Процесс обучения Seedance 1.0 делится на несколько этапов: изначально обучение проводится на основе обширных данных изображений и видео, затем продолжается изучением глубоких техник перехода сцен в разных стилях.
Люди также играют ключевую роль в процессе обучения, поскольку инженеры выбирают высококачественные видео для обучения модели. Цикл обучения продолжается до тех пор, пока Seedance 1.0 не сможет выбрать оптимальный результат из большого количества видео, генерируемых по запросу.
В настоящее время Seedance 1.0 ограничивает максимальную продолжительность видео 5 секундами (по сравнению с 8 секундами в Veo 3). Однако его главное преимущество — высокая скорость обработки: создание видео в формате Full HD занимает всего 41 секунду. Недостатком Seedance 1.0 является отсутствие поддержки автоматической озвучки, в отличие от конкурента от Google.
ByteDance планирует в скором времени выпустить этот инструмент как для обычных пользователей, так и для профессиональных создателей контента, который удовлетворит потребности в создании рекламных видеороликов или короткого контента в социальных сетях.
До Seedance 1.0 компания ByteDance разрабатывала такие инструменты для создания видео на базе ИИ, как OmniHuman, Goku и Jimeng AI. Однако Seedance 1.0 — первый продукт, который, по уверениям компании, превосходит конкурентов по возможностям создания видео на базе ИИ.
Источник: https://znews.vn/cong-ty-me-tiktok-ra-mat-cong-nghe-thach-thuc-google-post1562025.html
Комментарий (0)