Adobe AI Foundry адаптирует модели Firefly под нужды клиентов

Стремясь привлечь в свою экосистему больше корпоративных команд, компания Adobe запустила новую службу кастомизации моделей под названием Adobe AI Foundry, которая будет создавать специализированные версии ее флагманской ИИ-модели Firefly.

Adobe AI Foundry будет сотрудничать с корпоративными клиентами для перепроектирования и переобучения моделей Firefly под конкретного заказчика. Версии моделей AI Foundry отличаются от пользовательских моделей Firefly тем, что модели Foundry понимают несколько концепций по сравнению с пользовательскими моделями, работающими только с одной концепцией. Эти модели также будут мультимодальными, предлагая более широкие сценарии использования, чем пользовательские модели Firefly, которые могут принимать только изображения и отвечать на них. 

Модели Adobe AI Foundry на базе Firefly будут знать тон бренда компании, стиль ее изображений и видео, продукты и услуги, а также всю ее интеллектуальную собственность. Модели будут генерировать контент на основе этой информации для любого сценария использования, который потребуется компании. 

Ханна Эльсакр (Hannah Elsakr), вице-президент по новым направлениям бизнеса GenAI в Adobe, рассказала VentureBeat, что идея создания AI Foundry возникла потому, что корпоративным клиентам потребовались более сложные заказные версии Firefly. Но учитывая сложность потребностей предприятий, Adobe будет заниматься перепроектированием самостоятельно, а не перекладывать эти обязанности на плечи клиентов. 

«Мы будем переобучать наши собственные коммерчески безопасные модели Firefly с использованием интеллектуальной собственности предприятия. Мы храним эту интеллектуальную собственность отдельно. Мы никогда не возвращаем ее в базовую модель, и само предприятие владеет этим результатом», — отметила Эльсакр. 

Adobe будет развертывать версию Firefly от Foundry с помощью своего API-решения Firefly Services. 

Эльсакр сравнила AI Foundry с консультационной службой, поскольку специалисты Adobe будут работать напрямую с корпоративными клиентами над переобучением модели. 

Глубокая настройка

Эльсакр называет Foundry методом глубокой настройки (deep tuning), поскольку он идет дальше простой донастройки (fine-tuning) модели.

«С точки зрения здравого смысла, если говорить более простым языком, мы хирургическим путем открываем базовые модели Firefly, — пояснила Эльсакр. — Таким образом, вы получаете выгоду от всех мировых знаний нашей модели изображений или видеомодели. Мы возвращаемся назад во времени и привносим интеллектуальную собственность предприятия, например бренд. Это могут быть кадры определенного стиля съемки, все, на что у них есть лицензия для внесения. Затем мы проводим переобучение. Мы называем это непрерывным предварительным обучением, когда мы перевешиваем модель, чтобы изменить некоторые параметры. Так что мы буквально переобучаем нашу базовую модель, и именно поэтому мы называем это глубокой настройкой, а не донастройкой». 

Часть конвейера обучения включает работу встроенных команд Adobe с компанией для определения данных, которые им понадобятся. Затем данные безопасно передаются, поступают в систему и тегируются. Они подаются в базовую модель, после чего Adobe запускает процесс предварительного обучения модели. 

Эльсакр утверждает, что версии Firefly от Foundry не будут маленькими или урезанными моделями. Зачастую дополнительные данные от компаний расширяют параметры Firefly. 

Двумя первыми клиентами Adobe AI Foundry стали Home Depot и Walt Disney Imagineering, научно-исследовательское подразделение Disney по развитию парков развлечений. 

«Мы постоянно ищем инновационные способы улучшения клиентского опыта и оптимизации наших творческих рабочих процессов. AI Foundry от Adobe представляет собой захватывающий шаг вперед в освоении передовых технологий для углубления взаимодействия с клиентами и создания качественного контента на всех наших цифровых каналах», — заявила Молли Баттин (Molly Battin), старший вице-президент и директор по маркетингу The Home Depot.

Еще больше кастомизации

Предприятия часто прибегают к донастройке и кастомизации моделей, чтобы приблизить большие языковые модели с их огромными внешними знаниями к потребностям своих компаний. Донастройка также позволяет корпоративным пользователям использовать модели исключительно в контексте данных своей организации, чтобы модель не выдавала текст, совершенно не связанный с бизнесом.

Однако большинство организаций выполняют донастройку самостоятельно. Они подключаются к API модели и начинают ее переобучение, чтобы она давала ответы на основе их фактических данных (ground truth) или предпочтений. Существует несколько методов донастройки, включая те, которые можно выполнить с помощью всего одного промпта. Другие поставщики моделей также стараются облегчить клиентам задачу донастройки, например компания OpenAI со своей рассуждающей моделью o4-mini. 

По словам Эльсакр, она ожидает, что у некоторых компаний будет по три версии Firefly: версия Foundry для большинства проектов, пользовательский Firefly для конкретных вариантов использования с одной концепцией и базовый Firefly, поскольку некоторым командам нужна модель, менее обремененная корпоративными знаниями.