Meta запустит языковую модель ИИ LLaMA, чтобы помочь исследователям и конкурировать с ChatGPT

Meta запустит языковую модель ИИ LLaMA, чтобы помочь исследователям и конкурировать с ChatGPT

Исходный узел: 1976707

Meta объявила в пятницу, что выпускает новую языковую модель, основанную на искусственном интеллекте, поскольку гонка генеративного ИИ накаляется, заявил в пятницу генеральный директор Марк Цукерберг. Новая языковая модель предназначена для использования в исследованиях и будет доступна академическим исследователям, правительству, гражданскому обществу и академическим организациям, а также отраслевым исследователям.

Языковая модель, называемая LLaMA, предназначена для создания текстов и разговоров, обобщения письменного материала и выполнения сложных задач, таких как решение математических теорем или предсказание структуры белков. В Facebook пост, Мета сказал:

«Мы представляем LLaMA, набор базовых языковых моделей с параметрами от 7 до 65 миллиардов. Мы обучаем наши модели на триллионах токенов и показываем, что можно обучать современные модели, используя исключительно общедоступные наборы данных, не прибегая к проприетарным и недоступным наборам данных. В частности, LLaMA-13B превосходит GPT-3 (175B) по большинству тестов, а LLaMA-65B конкурирует с лучшими моделями Chinchilla70B и PaLM-540B. Мы публикуем все наши модели для исследовательского сообщества».

Также в сообщении в Твиттере научный сотрудник Facebook AI Research Гийом Лэмпл сказал:

«Сегодня мы выпускаем LLaMA, 4 модели фундамента с параметрами от 7B до 65B. LLaMA-13B превосходит OPT и GPT-3 175B в большинстве тестов. LLaMA-65B может конкурировать с Chinchilla 70B и PaLM 540B».

Популярность ChatGPT резко возросла после его выпуска 30 ноября 2022 года. Чат-бот OpenAI на базе ИИ мог делать практически все: от написания стихов и исправления ошибок кодирования с подробными примерами до создания художественных подсказок ИИ. Это может даже объяснить временную сложность алгоритма пузырьковой сортировки в наихудшем случае.

Всего за два месяца в январе число активных пользователей ChatGPT достигло 100 миллионов в месяц, что сделало его самым быстрорастущим потребительским приложением в истории. На прошлой неделе компания объявила о запуске ChatGPT Plus, пилотного плана подписки за 20 долларов в месяц для своего популярного чат-бота на базе искусственного интеллекта. Внезапный успех ChatGPT оказал большее давление на другие технологические компании, включая Google, Baidu и Alibaba.

ChatGPT — это основанный на диалогах интерфейс чата с искусственным интеллектом для семейства больших языковых моделей GPT-3. Умопомрачительный ChatGPT является преемником Generative Pre-trained Transformer 3 (GPT-3), который представляет собой модель авторегрессионного языка, использующую глубокое обучение для создания текста, подобного человеческому.

ChatGPT был адаптирован из модели GPT-3.5, но обучен давать более разговорные ответы. Однако, в отличие от GPT-3, новый ChatGPT демонстрирует ряд новых возможностей, включая возможность вести диалог с пользователями, писать программные коды, рассказывать истории и предлагать решения сложных математических уравнений. Прелесть всего этого в том, что вы можете сами протестировать нового чат-бота прямо здесь.

Вы можете скачать PDF-копию технического описания LLaMA ниже.

333078981_693988129081760_4712707815225756708_n

Отметка времени:

Больше от Техстартапы