Большие языковые модели сегодня уже не просто предсказывают следующее слово. За последние два года они значительно улучшились, что не может объясняться лишь масштабированием. Если в 2024 году LLM могли дать лишь поверхностные ответы, то теперь они способны на более глубокое взаимодействие.
Модели научились осознавать, когда не располагают нужной информацией, и могут сказать «я не знаю», а также обращаться за помощью, используя доступные инструменты. Например, вместо того чтобы просто отвечать на вопрос о погоде, они могут инициировать поиск в интернете и предоставить актуальные данные.
С внедрением методов обучения с подкреплением модели стали не только более уверенными в своих выводах, но и научились делить сложные задачи на подзадачи, что улучшает качество рассуждений. Теперь они могут генерировать дополнительные токены, исследовать альтернативы и давать более обоснованные ответы, что открывает новые горизонты в их применении.
