Разделение в мире искусственного интеллекта: llm и открытый исходный код

Наблюдается разделение в области искусственного интеллекта, где одна сторона сосредоточена на создании больших языковых моделей (LLM), таких как GPT-4, а другая — на разработке небольших моделей с открытым исходным кодом. GPT-4, разработанный OpenAI, является мощной, но закрытой моделью, для доступа к которой требуется подписка и использование API. В противоположность этому, существует растущее сообщество, которое создает и использует небольшие языковые модели с открытым исходным кодом, такие как Mistral 7B и Gemma.

Альтернативные подходы

Эти небольшие модели, хотя и не так мощны, как GPT-4, обладают рядом преимуществ. Они могут быть запущены на обычном оборудовании, что делает их более доступными. Кроме того, открытый исходный код позволяет исследователям и разработчикам изучать, модифицировать и улучшать модели, что способствует инновациям и прозрачности.

Преимущества открытого исходного кода

Некоторые эксперты считают, что LLM с открытым исходным кодом могут превзойти закрытые модели в будущем, поскольку сообщество может быстро разрабатывать и распространять улучшения. Открытый исходный код также дает пользователям больший контроль над технологией и позволяет адаптировать ее к конкретным потребностям. Примером может служить Gemma, созданная командой Google DeepMind. Она доступна в качестве модели с открытым весом через Kaggle и Hugging Face.