• Новая модель ИИ от Meta — SAM 2 — способна распознавать и отслеживать в реальном времени любой объект, движущийся в видео, расширяя возможности обработки изображений своего предшественника и открывая новые перспективы для монтажа и анализа видео.
  • Технология сегментации в реальном времени SAM 2 демонстрирует способность ИИ обрабатывать движущиеся изображения, точно различая элементы на экране, даже когда объект выходит из кадра, а затем возвращается.

НАШЕ МНЕНИЕ
Meta представила новую модель ИИ под названием Segment Anything Model 2 (SAM 2), которая способна распознавать и отслеживать любой объект в видео в реальном времени, открывая новые возможности для монтажа и анализа видео. Технология сегментации в реальном времени SAM 2 демонстрирует способность ИИ обрабатывать движущиеся изображения — даже когда объекты выходят из кадра и возвращаются обратно, — и точно различать элементы на экране.
— Rae Li, корреспондент BTW

Что произошло

Metaпредставила продвинутую модель ИИ под названиемSAM 2, которая может распознавать и отслеживать любой объект в видео в реальном времени. В отличие от предыдущих моделей SAM, которые могли обрабатывать только статичные изображения, SAM 2 расширяет функциональность и поддерживает работу с видео. Технология сегментации SAM 2 в реальном времени показывает, как ИИ добивается значительных успехов в обработке движущихся изображений: он различает элементы на экране, даже когда они перемещаются, исчезают и вновь появляются в кадре. У этой технологии широкий спектр перспективных применений — от видеомонтажа до разработки систем компьютерного зрения, например, для обработки визуальных данных в беспилотных автомобилях.

Meta предоставила базу данных из 50 000 видео для обучения модели SAM 2. Хотя сейчас SAM 2 является открытой и бесплатной, такая ситуация может длиться недолго. Meta считает, что SAM 2 может произвести революцию в интерактивном видеомонтаже и разработке систем компьютерного зрения, особенно в части точного и эффективного отслеживания объектов. Кроме того, возможности сегментации видео в реальном времени SAM 2 открывают новый взгляд на использование ИИ в создании видео и имеют более широкое значение, чем модели ИИ для генерации видеоконтента.

Читайте также:Meta выплатила $1,4 млрд по знаковому делу о конфиденциальности в Техасе

Читайте также:Meta запускает AI Studio для улучшения социального взаимодействия

Почему это важно

Представление SAM 2 компанией Meta значимо для сферы видеомонтажа и анализа, поскольку оно знаменует крупный прогресс в технологиях распознавания и отслеживания объектов в видео в реальном времени. Возможности сегментации SAM 2 в реальном времени не только повышают эффективность и точность видеомонтажа, но и открывают новые перспективы для систем компьютерного зрения в таких областях, как автоматизированное вождение. Благодаря точной идентификации и отслеживанию объектов в видео SAM 2 становится мощным инструментом для обработки сложных визуальных данных.

Запуск SAM 2 отражает потенциал технологий ИИ для создания и обработки видеоконтента. Такие технологические достижения будут стимулировать инновации в создании видеоконтента и способны изменить то, как мы взаимодействуем с видео, делая пользовательский опыт более насыщенным и персонализированным.