Назад

PaLM 2: новая генеративная модель от Google

PaLM 2

Еще в марте этого года Google выпустили первую версию своего чатбота Bert. А на недавно прошедшем докладе I/O 2023 компания объявила, что Bard теперь работает на языковой модели PaLM 2. Эту модель нового поколения Google внедрила в большую часть своих продуктов. Бот умеет генерировать код, находить баги и быть помощником для разработчиков. Кроме того способен помочь с разработкой контент-плана, подаст идеи для рекламных кампаний и много что еще. Также бот станет генерировать изображения в партнерстве с Adobe Firefly. Google Bard доступен в 180 странах на 40 языках, включая русский.

Что же до PaLM 2, заявляется что модель работает более чем на 100 языках (20 из них – языки программирования), что позволяет лучше понимать создавать и переводить идиомы, загадки и поэмы. В набор обучающих данных было включено большое количество веб-страниц и научных работ, содержащих математические выражения. В результате, PaLM 2 показывает улучшенные результаты в логике, математике и повседневном (рациональном) мышлении.

Модель работает быстрее и качественнее своих предшественников и доступна в 4 размерах (Gecko, Otter, Bison и Unicorn). Это позволяет упростить ее применение для различных задач. Самая малая версия весит так мало, что может работать на мобильных устройствах, достаточно быстра для работы с приложениями, даже офлайн.

У модели есть несколько вариаций, так Med-PaLM 2 — ориентирована на медицинские знания и способна работать с тяжелыми и насыщенными медицинскими текстами, а Sec-PaLM 2 – версия для вопросов безопасности.

Много технических подробностей Google не предоставила, но разработчикам модель доступна через Google PaLM API и Colab. Чтобы научиться использовать такие модели и начать свое становление ML-разработчиком, рекомендуем базовый тренинг.