Google Bard скоро перейдет на более «продвинутую» языковую модель

Google скоро переведет Bard на гораздо более продвинутую языковую модель. Разница между LaMDA и PaLM должна быть разительной.

Широкая общественность не слишком впечатлена запуском Google своего «экспериментального диалогового сервиса» Bard. Столкнувшись с OpenAI ChatGPT и Microsoft Bing Chat, которые также работают на OpenAI GPT-4, пользователи обнаружили, что ответы от решения Mountain View не такие подробные, как у его конкурентов. Однако вскоре это может измениться. Генеральный директор Google Сундар Пичаи подтвердил в подкасте The New York Times «Hard Fork», что Бард перейдет от своей текущей модели LaMDA к более крупному набору данных PaLM в ближайшие дни.

Google скоро обновит Bard до гораздо более продвинутой языковой модели.

Отвечая на вопрос об отзывах после ухода Барда, Сундар Пичаи сказал: «У нас явно есть модели, которые могут больше. Очень скоро, может быть, прямо сейчас, мы модернизируем Барда до одной из наших гораздо более функциональных моделей PaLM, чтобы дать ему больше возможностей, более структурированное мышление, включая программирование».

Чтобы лучше оценить различия, Google заявил, что обучил LaMDA не менее чем 137 миллиардам параметров, когда в прошлом году обнародовал детали своих языковых моделей. PaLM, с другой стороны, был обучен примерно с 540 миллиардами параметров. Оба сильно изменились с начала 2022 года, но контраст проясняет, почему Google теперь хочет перевести Bard на PaLM с его большим набором данных и более разнообразными ответами.

Сундар Пичаи говорит, что его не беспокоит скорость разработки искусственного интеллекта Google по сравнению с конкурентами. Когда Бард сделал свои первые шаги в феврале, он признал, что использование LaMDA несколько ограничило его возможности, но добавил, что преимуществом является меньшая вычислительная мощность, позволяющая пользователям тестировать и получать прибыль. Сундар Пичаи также хотел убедиться, что Google проведет собственную проверку безопасности и качества Bard после того, как он будет выпущен в реальном мире.

Разница между LaMDA и PaLM должна быть разительной.

Для этого Сундар Пичаи пояснил, что Google не хочет запускать «более мощную модель, пока не будет полностью уверен, что сможет правильно ею управлять. Мы только в самом начале. Со временем у нас будут лучшие модели для подключения, но я не хочу, чтобы это была гонка за тем, кто доберется первым, для нас очень важно сделать все правильно».

Это мнение присутствует в умах более 1800 человек (включая технических лидеров и других исследователей ИИ), которые подписали открытое письмо, призывающее к минимальному шестимесячному перерыву в разработке технологий ИИ, «более мощных, чем GPT-4».

Сундар Пичаи не считает, что это можно сделать успешно без участия правительства, но согласен с тем, что необходимо лидерство: «ИИ слишком важен, чтобы его можно было регулировать. Это также слишком важно, чтобы плохо регулироваться. Поэтому я рад, что такие разговоры имеют место».