Как работает ChatGPT простыми словами

В этой статье

ChatGPT составляет ответ по частям: обрабатывает запрос, учитывает доступный контекст и генерирует продолжение текста с помощью обученной модели. В процессе обучения модель настраивает числовые параметры, улавливая закономерности в данных. При ответе она использует эти параметры; когда нужны свежие сведения, сервис может дополнительно обратиться к веб-поиску. Объяснение OpenAI, справка о поиске.

Из чего складывается ответ

У текстовой модели есть программа и множество числовых параметров — весов. Они определяют, как модель обрабатывает входные данные и какие продолжения считает подходящими. Сам ChatGPT — сервис, который предоставляет доступ к моделям и инструментам через сайт и приложения. Как устроены модели OpenAI.

Упрощённая последовательность выглядит так:

  1. Ваш текст разбивается на токены — небольшие единицы: части слов, целые слова или знаки пунктуации.
  2. Модель обрабатывает токены с учётом доступного ей контекста.
  3. Генерирует следующий фрагмент, затем продолжает уже получившийся текст.
  4. Сервис показывает ответ пользователю.

Это схема текстового ответа, а не полное описание внутренней работы каждого режима. Например, у рассуждающих моделей есть внутренние токены рассуждения, которые не выводятся как текст ответа. Справка о токенах.

Представьте фразу: «Перед закрытием мастерской нужно…». Её можно продолжить словами «убрать инструменты» или «проверить заказы». Если перед ней написать «Составь памятку уборщику», подходящее продолжение будет иным, чем после «Составь памятку администратору». Это учебная иллюстрация влияния условий, а не записанные ответы ChatGPT или измеренные вероятности.

Модель не обязана каждый раз выдавать одинаковую формулировку: допустимых продолжений несколько, и в генерации есть вариативность. Почему ответы различаются.

Как обучают GPT и ChatGPT

Предобучение помогает модели освоить закономерности данных. На текстах она учится предсказывать продолжение; параметры корректируются в процессе обучения. OpenAI называет среди источников открытые интернет-материалы, данные партнёров и материалы, предоставленные или созданные пользователями, тренерами и исследователями. Источники и этапы обучения.

Последующая настройка помогает превратить модель продолжения текста в полезного помощника. В описании, опубликованном OpenAI в 2025 году, сначала используют образцы желательных ответов, затем обучение с подкреплением: ответы оценивают и настраивают модель так, чтобы она чаще давала более высоко оценённые варианты. Сигналы оценки могут учитывать правильность, полезность и другие требования. Конкретные методы меняются между версиями. Описание процесса настройки.

В нашем примере хороший ответ администратору должен помогать проверить заказы. Красивое описание интерьера мастерской тоже может грамотно продолжать тему, но не выполнять поручение. Обучение следованию инструкциям нужно в том числе для такого различия между связным текстом и полезным ответом.

Чем контекст отличается от обучения

Контекст — информация, доступная модели при конкретном запросе. Вы можете добавить условие, фрагмент документа или уточнение задачи. Это меняет исходные данные для ответа. Обучение же меняет параметры модели.

У контекста есть предел, измеряемый в токенах. Он зависит от модели; число слов нельзя напрямую принять за число токенов, особенно при сравнении разных языков. Поэтому большой документ удобнее разбирать по частям с ясным вопросом к каждой, а важные условия стоит держать рядом с текущим заданием. Контекст и ограничения размера.

Для небольшой задачи попробуйте такой запрос:

Напиши объявление для клиентов мастерской, до 40 слов.
Факты: сегодня приняли 12 заказов, 9 уже готовы.
Причина задержки и срок готовности остальных заказов неизвестны.
Укажи, сколько заказов осталось. Не придумывай причину и срок.

Подходящий вариант, написанный для этого примера:

Сегодня приняли 12 заказов, 9 уже готовы. В работе остаются 3 заказа. Срок их готовности пока неизвестен.

Здесь есть три разных операции: взять числа из условия, вычислить остаток и оформить сообщение. Фразы «ждём запчасти» или «всё будет готово завтра» добавили бы сведения, которых вы не сообщали. Проверяйте отдельно и расчёт — 12 − 9 = 3, — и отсутствие таких дополнений. Сам по себе гладкий текст не показывает, откуда взялась каждая деталь.

Откуда берутся свежие сведения

Обучение и веб-поиск решают разные задачи. Если спросить, как написать объявление, достаточно условий и языковых навыков модели. Если нужен сегодняшний график конкретной мастерской, требуется актуальный источник.

ChatGPT может запустить поиск автоматически, когда для ответа полезны свежие данные. Поиск доступен в том числе на бесплатном плане, с учётом лимитов. Ответ может содержать ссылки на источники. Как работает веб-поиск.

Для проверки графика укажите название мастерской, город и нужную дату. Затем откройте источник: относится ли он к нужному филиалу, не описывает ли прошлогодний праздничный режим? OpenAI отдельно предупреждает, что результаты поиска и цитаты могут быть неполными, устаревшими или ошибочными. Ссылка полезна, когда по ней действительно можно проверить утверждение.

Почему ChatGPT может уверенно ошибаться

Правдоподобное продолжение не обязательно истинно. В исследовании OpenAI ошибки связываются в том числе с предобучением на предсказании текста и с оценками, которые поощряют угадывание вместо признания неопределённости. Редкий произвольный факт нельзя надёжно вывести только из языковых закономерностей. Почему языковые модели ошибаются.

В задаче мастерской модель может составить убедительное объяснение задержки, хотя её причина неизвестна. Чтобы заметить это, разложите ответ на утверждения: число принятых заказов подтверждается условием, остаток — расчётом, а срок ремонта ничем не подтверждается. Удалите неподтверждённое или замените его честным «пока неизвестно».

Такой разбор полезен и для других задач: попросите отделить данные из вашего текста от выводов, а свежие внешние факты — подкрепить источниками. Это облегчает проверку, но не гарантирует безошибочный ответ.

Проверить детали

Источники материала

Функции и условия сервисов меняются. Дата сверки указана в начале статьи. Как подготовлен материал

Есть следующая задача?Ещё по теме «Первые шаги» →