Databricks инвестирует в Mistral и переносит свои модели искусственного интеллекта на платформу анализа данных

Сегодня Databricks, быстрорастущая компания по инфраструктуре данных, возглавляемая Али Годси, объявила о партнерстве с парижским Mistral, хорошо финансируемым стартапом, который произвел фурор в мировом сообществе искусственного интеллекта благодаря растущему семейству высокопроизводительных моделей больших языков (LLM). ) — многие из них с открытым исходным кодом.

В рамках этого соглашения Databricks инвестирует нераскрытую сумму в Mistral, дополняя свою серию А и привлекая избранных специалистов Mistral LLM на свою платформу анализа данных.

Этот шаг приведет к прямой интеграции моделей, что упростит корпоративным пользователям их использование со своими данными для генеративных приложений искусственного интеллекта — без каких-либо изменений в безопасности, конфиденциальности и управлении, которые уже предлагает платформа Databricks.

Это событие знаменует собой появление еще одного заметного партнера-дистрибьютора Mistral, который активно продвигается вперед благодаря отраслевым партнерствам. Совсем недавно компания объявила об аналогичном партнерстве со Snowflake, которая напрямую конкурирует с Databricks посредством своих предложений по облачным данным, а также с Microsoft, последняя из которых вызвала критику корпоративного захвата и интерес регуляторов.

Выберите модели для встроенной интеграции

В опубликованном сегодня сообщении в блоге Databricks подтвердила, что партнерство с Mistral приведет к встроенной интеграции двух моделей генерации текста компании — Mistral 7B и Mixtral 8x7B, обе с открытым исходным кодом.

Первая представляет собой небольшую модель преобразователя с 7 миллиардами параметров, обученную с длиной контекста 8 тыс., и очень эффективна в обслуживании. Между тем, последний представляет собой разреженную смесь экспертных моделей (SMoE), поддерживающую длину контекста 32 КБ и способную обрабатывать английский, французский, итальянский, немецкий и испанский языки. Mixtral 8x7B даже превосходит Meta Llama 2 70B (на котором он обучался) и OpenAI GPT-3.5 в нескольких тестах, включая GSM-8K и MMLU, и при этом может похвастаться более быстрым выводом.

Пользователи платформы Databricks Data Intelligence теперь могут найти обе эти модели на рынке платформы вместе с информацией об их возможностях и различных способах их использования.

Databricks сообщает, что пользователи могут экспериментировать с моделями на Mosaic AI Playground, доступными через консоль платформы, использовать их в качестве оптимизированных конечных точек модели с помощью Mosaic AI Model Serving или настраивать их с помощью собственных данных, размещенных на платформе (Mosaic AI Foundation Model Adaptation), для целевых целей. конкретный вариант использования.

«Модели искусственного интеллекта Mistral теперь можно использовать и настраивать различными способами на Databricks, который предлагает наиболее полный набор инструментов для создания, тестирования и развертывания комплексных генеративных приложений искусственного интеллекта. Независимо от того, начинаете ли вы с параллельного сравнения предварительно обученных моделей или используете модели с оплатой за токены, существует несколько вариантов быстрого начала работы.

Хотя эта новость хороша для клиентов Databricks, желающих создавать приложения и решения поколения AI с использованием своих данных на платформе, важно отметить, что в партнерстве не упоминается Mistral Large, последняя модель от Mistral, которая находится сразу за GPT- 4 и превосходит Claude 2 от Anthropic, Gemini Pro от Google и GPT-3.5 с собственным знанием пяти языков и контекстным окном из 32 тысяч токенов. Snowflake интегрировала эту модель в свой облачный сервис Cortex вместе с Mixtral 8x7B и Mistral 7B.

В ответ на обращение VentureBeat представитель Databricks заявил, что пока нечего рассказать об интеграции Mistral Large. Другими коммерчески пригодными моделями с открытым исходным кодом, предлагаемыми Databricks, являются Llama-2 от Meta, CodeLlama, Stable Diffusion XL и семейство MPT от Mosaic.

Mistral продолжает сотрудничество

Databricks и Snowflake — не единственные партнеры Mistral.

Компания, которая провела крупнейший в Европе посевной раунд в июне 2023 года и вскоре последовала за ним масштабной серией А, сосредоточила основное внимание на взаимодействии с отраслью, чтобы расширить свое присутствие и укрепить свои позиции в качестве игрока, которому доверяют поставщики, в доминирующей категории искусственного интеллекта. от OpenAI, Anthropic и Google.

Всего несколько недель назад компания получила от Microsoft инвестиции в размере 16 миллионов долларов для добавления своих моделей на облачную платформу Azure. Сделка сделала Mistral лишь второй компанией после OpenAI, предлагающей свои модели на платформе Microsoft.

Затем компания также подписала отдельные партнерские отношения с IBM, сделав Mistral 8x7B доступным на WatsonX, а также с Perplexity и Amazon. Будет интересно посмотреть, какие еще партнерства сможет заключить стартап, чтобы повысить свою известность и продвигать варианты использования ИИ в разных секторах.