Компания Meta выпустила Llama 2, следующее поколение своей обширной линейки языковых моделей, что призвано расширить коммерческий доступ к генеративному искусственному интеллекту и бросить вызов стратегии закрытых моделей, используемой несколькими ведущими конкурентами. В заявлении компании от 18 июля говорится, что Llama 2 будет доступна бесплатно для исследовательского и коммерческого использования, а Microsoft выступит в качестве предпочтительного партнера Meta по распространению через Azure и Windows.

В релиз включены предварительно обученные и оптимизированные для чата модели с 7 миллиардами, 13 миллиардами и 70 миллиардами параметров. Meta предоставляет веса модели и исходный код, что дает разработчикам значительно больше контроля над развертыванием и тонкой настройкой, чем в системах, работающих только через API. Это делает Llama 2 не просто еще одной моделью чат-бота, а стратегической попыткой создать открытую экосистему вокруг инфраструктуры генеративного ИИ.

Компания Meta делает ставку на то, что дистрибуция может быть более ценной, чем эксклюзивность

В технической статье Llama 2: Open Foundation and Fine-Tuned Chat Modelsописывается семейство предварительно обученных моделей и версий, ориентированных на диалог, которые обучаются с помощью контролируемой тонкой настройки и обучения с подкреплением на основе обратной связи от людей. Meta утверждает, что модели чата превосходят другие общедоступные системы по многим показателям и были оценены на предмет полезности и безопасности как с помощью автоматизированного, так и с помощью тестирования людьми.

В собственной научной публикации подчеркивается, что релиз призван сделать разработку крупномасштабных моделей более доступной для исследователей и компаний, которым не хватает ресурсов для обучения передовых систем с нуля. Модель с 70 миллиардами параметров особенно важна, поскольку она помещает модель значительного масштаба в экосистему, где разработчики могут самостоятельно изучать, адаптировать и развертывать ее.

Такой подход отличается от модели, используемой OpenAI и Google для своих ведущих потребительских систем, где наиболее функциональные модели, как правило, остаются за проприетарными интерфейсами. Meta рассчитывает на то, что широкое внедрение среди разработчиков, доступность в облаке и внешние эксперименты смогут создать более сильную платформу вокруг Llama, чем жесткий контроль над технологией.

Microsoft получает еще одну крупную платформу искусственного интеллекта, не отказываясь от OpenAI

В своем заявлении о партнерстве , что клиенты Azure смогут дорабатывать и развертывать модели Llama 2 через каталог моделей Azure AI, а разработчики под Windows смогут запускать оптимизированные версии локально, используя среду выполнения ONNX и DirectML.

Это партнерство примечательно тем, что Microsoft также является крупнейшим стратегическим партнером OpenAI. Поддержка Llama 2 предоставляет клиентам Azure выбор между проприетарной и более открытой распределенной моделями и укрепляет позиции Microsoft как поставщика облачных услуг независимо от того, какую модель предпочитают разработчики.

Компания Meta также заявляет, что Llama 2 будет доступна через Amazon Web Services, Hugging Face и других провайдеров. Такой охват мультиоблачных сред снижает вероятность того, что модель будет привязана к одному поставщику инфраструктуры, и может ускорить эксперименты со стороны стартапов, университетов и команд разработчиков корпоративного программного обеспечения.

«Открытый» не означает неограниченный

Компания Meta описывает Llama 2 как проект с открытым исходным кодом, но лицензия включает ограничения на использование и не идентична разрешительным лицензиям на программное обеспечение, обычно используемым в проектах с открытым исходным кодом. Компания также опубликовала политику допустимого использования и руководство по ответственному использованию, направленные на ограничение вредоносных или незаконных приложений.

В документе, описывающем модель, подробно описаны настройка безопасности, тестирование с использованием методов противодействия и известные ограничения. Компания Meta признает, что Llama 2 может генерировать неточные, предвзятые или небезопасные данные, и что результаты бенчмаркинга не могут охватить все реальные сценарии использования. Компания заявляет, что использовала внешнее тестирование «красной командой» и итеративную тонкую настройку безопасности для версий чата.

В анализе релиза, проведенном TechCrunch, отмечалось как улучшение производительности в бенчмарках, так и собственные предупреждения Meta о предвзятости, токсичности и неравномерной производительности в разных задачах. Эти ограничения особенно важны, поскольку предоставление разработчикам весов модели упрощает изменение поведения вне рамок централизованно управляемого API.

Коммерческий эффект может оказаться больше, чем в эталонной гонке

Для предприятий наиболее важной функцией может быть возможность запуска или тонкой настройки модели в контролируемой ими среде. Компании, работающие с конфиденциальными данными, могут предпочесть модель, которую можно развернуть в собственной облачной среде или инфраструктуре, а не отправлять запросы внешнему хостинговому сервису.

Такая гибкость может также оказать давление на экономику генеративного ИИ. Если доступны работоспособные модели без платы за лицензирование за каждый запрос, разработчики могут сравнить стоимость самостоятельного размещения с платными API. В отчете Bloomberg о запуске подчеркивалось решение Meta не взимать плату за доступ к моделям, а также роль Microsoft и других облачных провайдеров в обеспечении коммерческой доступности сервиса.

Для Meta это решение сопряжено с определенными рисками. Широкое распространение может увеличить вероятность того, что модель будет использована не по назначению, и компания будет иметь меньший контроль над последующими реализациями, чем поставщики, которые хранят свои системы полностью за размещенными интерфейсами. Meta утверждает, что открытость также может повысить безопасность, позволяя большему числу исследователей тестировать, выявлять и сообщать о недостатках.

Таким образом, Llama 2 представляет собой стратегическое соревнование по вопросу о том, как следует распределять базовые возможности ИИ, а не просто по тому, какая компания покажет лучший результат в бенчмарке. Если разработчики широко внедрят эту модель, Meta может сформировать де-факто открытый стандарт для генеративного ИИ, а Microsoft получит дополнительную рабочую нагрузку для Azure и Windows. Если же проблемы безопасности, лицензирования или производительности ограничат внедрение, рынок может по-прежнему отдавать предпочтение жестко контролируемым проприетарным системам. Первое испытание начинается сейчас, когда разработчики получают доступ к одному из крупнейших семейств моделей, доступных для широкого использования, которые были выпущены на сегодняшний день.