Databricks запускает DBRX, бросая вызов крупным технологиям в гонке искусственного интеллекта с открытым исходным кодом

Databricks, быстрорастущая компания по производству корпоративного программного обеспечения, объявила сегодня о выпуске DBRX, новой модели искусственного интеллекта с открытым исходным кодом, которая, по утверждению компании, устанавливает новый стандарт эффективности и производительности искусственного интеллекта с открытым исходным кодом.

Модель, содержащая 132 миллиарда параметров, превосходит ведущие альтернативы с открытым исходным кодом, такие как Llama 2-70B и Mixtral, по ключевым критериям, измеряющим понимание языка, способности к программированию и математические навыки.

Несмотря на то, что DBRX не соответствует мощности GPT-4 от OpenAI, руководители компании представили его как значительно более эффективную альтернативу GPT-3.5 за небольшую часть стоимости.

«Мы рады поделиться DBRX со всем миром и подтолкнуть отрасль к более мощному и эффективному искусственному интеллекту с открытым исходным кодом», — сказал Али Годси, генеральный директор Databricks, на пресс-конференции в понедельник. «Хотя базовые модели, такие как GPT-4, являются отличными инструментами общего назначения, бизнес Databricks строит индивидуальные модели для каждого клиента, которые глубоко понимают его собственные данные. DBRX показывает, что мы можем добиться этого».

Инновационная архитектура «смесь экспертов»

Ключевым нововведением, по мнению исследователей Databricks, стоящих за DBRX, является архитектура модели, созданная «смешанными экспертами». В отличие от конкурирующих моделей, которые используют все свои параметры для генерации каждого слова, DBRX содержит 16 экспертных подмоделей и динамически выбирает четыре наиболее подходящие для каждого токена. Это обеспечивает высокую производительность при наличии всего 36 миллиардов активных параметров в любой момент времени, что обеспечивает более быструю и дешевую работу.

Команда Mosaic, исследовательское подразделение, приобретенное Databricks в прошлом году, разработала этот подход на основе своей предыдущей работы Mega-MoE. «За прошедшие годы команда Mosaic стала намного лучше обучать основам искусственного интеллекта», — сказал Годси. «Мы можем быстро создать действительно хорошие модели искусственного интеллекта — DBRX занял около двух месяцев и стоил около 10 миллионов долларов».

Развитие корпоративной стратегии ИИ Databricks

Открыв исходный код DBRX, Databricks стремится утвердиться в качестве лидера в области передовых исследований в области искусственного интеллекта и обеспечить более широкое внедрение своей новой архитектуры. Тем не менее, эта версия также поддерживает основной бизнес компании по созданию и размещению пользовательских моделей искусственного интеллекта, обученных на частных наборах данных клиентов.

Многие клиенты Databricks сегодня полагаются на такие модели, как GPT-3.5 от OpenAI и других поставщиков. Но размещение конфиденциальных корпоративных данных у третьей стороны вызывает проблемы с безопасностью и соблюдением требований. «Наши клиенты доверяют нам обработку регулируемых данных в международных юрисдикциях», — сказал Годси. «У них уже есть данные в Databricks. Благодаря возможностям настраиваемых моделей DBRX и Mosaic они могут воспользоваться преимуществами передового искусственного интеллекта, сохраняя при этом данные в безопасности».

Подача иска в условиях растущей конкуренции

Запуск состоялся в условиях, когда Databricks сталкивается с растущей конкуренцией в своем основном бизнесе по работе с данными и платформами искусственного интеллекта. Snowflake, гигант хранилищ данных, недавно запустил собственный сервис искусственного интеллекта Cortex, который дублирует некоторые функции Databricks. Тем временем существующие поставщики облачных услуг, такие как Amazon, Microsoft и Google, стремятся добавить возможности генеративного искусственного интеллекта в свои стеки.

Но, заявив о своих правах на самые современные исследования с открытым исходным кодом с помощью DBRX, Databricks надеется позиционировать себя как лидера в области искусственного интеллекта и привлечь таланты в области науки о данных. Этот шаг также позволяет извлечь выгоду из растущего сопротивления моделям искусственного интеллекта, коммерциализированным крупными технологическими компаниями, которые некоторые считают «черными ящиками».

Однако настоящим испытанием эффективности DBRX станет его внедрение и ценность, которую он создаст для клиентов Databricks. Поскольку предприятия все чаще стремятся использовать возможности искусственного интеллекта, сохраняя при этом контроль над своими собственными данными, Databricks делает ставку на то, что уникальное сочетание передовых исследований и платформы корпоративного уровня выделит их среди конкурентов.

С DBRX компания бросила вызов, бросив вызов как крупным технологическим конкурентам, так и конкурентам с открытым исходным кодом, чтобы соответствовать ее инновациям. Войны ИИ накаляются, и Databricks ясно дает понять, что намерена стать крупным игроком.