• Palmyra-Vision — новая функция, разработанная компанией Writer из Сан-Франциско, предлагает генерацию текста на основе ИИ из изображений, графиков и диаграмм.
  • Инновационная Palmyra-Vision использует технику множественных моделей с впечатляющей точностью, как отмечает генеральный директор May Habib.
  • Habib подчёркивает важность человеческого контроля при использовании таких инструментов.

Компания Writer из Сан-Франциско разрабатывает инструменты генеративного ИИ для письма. Сегодня компания представила Palmyra-Vision — новую функцию своей модели Palmyra, которая позволяет создавать текст из изображений, включая графики и диаграммы.

ИИ-генерация текста в Palmyra-Vision

Palmyra-Visionиспользует технику множественных моделей, где каждой модели поручается конкретная задача — определить, что находится на изображении, а затем сгенерировать текст с точностью четыре девятки.

Генеральный директор и соосновательница компании May Habib заявляет, что их стратегический выбор сосредоточиться на мультимодальном контенте включает возможность создавать слова из фотографий.

«Мы сосредоточимся на мультимодальном вводе, но на текстовом выводе — то есть на генерации текста и информации, предоставляемой в текстовом виде», —заявилаHabib.

У этого есть несколько применений, например, сайт электронной коммерции, который может автоматически извлекать важную информацию из графиков и диаграмм и генерировать текст для обновления сайта с актуальными продуктами.

Проверка соответствия требованиям — ещё один пример. Фармацевтическая компания, например, могла бы использовать Palmyra-Vision для автоматической проверки соответствия рекламных материалов стандартам FDA.

Также читайте:Бывшие инженеры Twitter и Tesla запускают Particle — ИИ-читатель новостей

Habib подчёркивает важность человеческого контроля

По словамHabib, не рекомендуется использовать эти инструменты без проверки человеком в рамках рабочего процесса. Она считает, что это критически важно, поскольку любая модель может преувеличивать или просто искажать факты, поэтому необходимо, чтобы кто-то проверял результаты.

Компания рассматривает сотрудничество с облачными платформами

По даннымCrunchbase, компания уже получила 126 миллионов долларов. В рамках своего роста она сейчас ведёт переговоры о сотрудничестве с ведущими облачными инфраструктурными платформами.

В сентябре прошлого года компания завершила последний раунд финансирования —серию Bна 100 миллионов долларов под руководством Iconiq.