Модуль 1 · тема 1.2
Запросы к языковой модели для инженерных задач
Как разговаривать с моделью, чтобы ошибок было меньше, а находить их было проще
День 1 · Виталий Пиков · архитектор информационной безопасности · pikov.expert
Две темы дня
В первой теме – модель, теперь – запрос
Первая тема
Что модель умеет
и где она ошибается
Теперь
Как с ней разговаривать,
чтобы ошибок было меньше,
а находить их было проще
Главная мысль темы
Главная мысль темы
Большая часть качества ответа закладывается до отправки запроса
Почему так
Модель отвечает на тот вопрос, который ей задали
В запросе нет исходных данных
Модель подставит типовые
Не сказано, в каком виде нужен ответ
Связный текст на полторы страницы, цифры придётся выписывать руками
Исходные данные, ограничения и нужный вид ответа лучше указать сразу
Донести до машины, что от неё хочется
Вебинар о проверке кода, который пишут агенты
Самая большая проблема при работе с агентами – люди иногда не умеют правильно донести до машины, что от неё хочется. Люди друг до друга до сих пор доносить не научились. А агенты почему-то должны понимать их с полуслова
О чём эта тема
Об этом наша тема
Как донести до модели,
что нам нужно
Вспомним первую тему и практику
Что показала практика 1.1
Один и тот же запрос –
в разные сервисы
Поиск ошибок
в готовом ответе
Многие найденные ошибки начинались не в модели, а в вопросе: чего-то в нём не было – и модель это додумала
Сейчас разберёмся, как сделать так, чтобы додумывать ей приходилось как можно меньше
Вспомним первую тему и практику
Что показала практика 1.1
Один и тот же запрос –
в разные сервисы
Поиск ошибок
в готовом ответе
Многие найденные ошибки начинались не в модели, а в вопросе: чего-то в нём не было – и модель это додумала
Сейчас разберёмся, как сделать так, чтобы додумывать ей приходилось как можно меньше
План
Что будет в этой теме
- Шесть частей хорошего запроса
- Приёмы, которые помогают
- Чего опасаться в самом запросе
- Что изменилось в новых моделях
- Шаблон запроса и чек-лист проверки ответа
Практика 1.2
С шаблоном и чек-листом – на практику
Лестница запроса
Пять ступеней: от одной строки до полной постановки
Задание 1 · 70 мин
Таблица требований
Фрагмент ТЗ – в таблицу, замечания – против пунктов ТЗ
Задание 2 · 60 мин
Ваш собственный чек-лист
Чек-лист из лекции – под свою работу
Задание 3 · 30 мин
Перед тем как начать
Держите перед глазами карточку задачи
- Исходные данные
- Что известно: факты, цифры, документы
- Ожидаемый результат
- Что именно нужно получить и в каком виде
- Критерии приёмки
- По каким признакам вы примете результат
- Ограничения
- Что считать заданным, чего не делать
Хороший запрос получается из неё почти целиком
Учебный кейс
Работаем на том же узле ЭС-24
- То же техническое задание
- Те же замечания
Так проще увидеть, как меняется ответ, когда меняется только запрос
Раздел 1
Из чего состоит хороший запрос
Контекст
Задача
Исходные данные
Ограничения
Формат ответа
Критерии проверки
Не в каждом запросе нужны все шесть. Но если ответ не устраивает, сначала проверьте, какой части не хватило
Часть 1 из 6
Контекст кто вы и о чём речь
Я инженер-электрик, разбираю замечания по испытаниям системы электроснабжения 24 В грузового автомобиля
Одна такая фраза задаёт уровень разговора: модель перестаёт объяснять азы и начинает говорить на языке инженера
Часть 1 из 6
Контекст кто вы и о чём речь
Я инженер-электрик, разбираю замечания по испытаниям системы электроснабжения 24 В грузового автомобиля
Одна такая фраза задаёт уровень разговора: модель перестаёт объяснять азы и начинает говорить на языке инженера
Часть 2 из 6
Задача что нужно получить
Предложи возможные причины замечания З-2 и способы их проверить
Называет тему
«Расскажи про ток покоя»
Называет результат
«Предложи причины
и способы проверки»
Часть 2 из 6
Задача что нужно получить
Предложи возможные причины замечания З-2 и способы их проверить
Называет тему
«Расскажи про ток покоя»
Называет результат
«Предложи причины
и способы проверки»
Часть 3 из 6
Исходные данные факты, на которые модель должна опираться
Описание узла
Генератор 28 В, 80 А. Две батареи 12 В, 190 А·ч. Потребители, которые работают на стоянке
ЭС-24Пункт 4.3 технического задания
Ток покоя – не более 40 мА. Измеряется через 30 мин после выключения зажигания
требованиеТекст замечания с цифрами
З-2. Ток покоя через 30 мин после выключения зажигания – 85 мА, через 2 ч – 62 мА
замечаниеМодель не знает вашего узла
Зачем нужны исходные данные
Модель не знает вашего узла
Всё, чего нет в запросе, она додумает
Часть 4 из 6
Ограничения чего делать не надо и что считать заданным
Что считать заданным
Генератор и батареи исправны,
их не рассматривай
Чего делать не надо
Не предлагай замену узлов
без проверки
Ограничения отсекают то, что вы уже проверили, и то, что вам не подходит
Часть 4 из 6
Ограничения чего делать не надо и что считать заданным
Что считать заданным
Генератор и батареи исправны,
их не рассматривай
Чего делать не надо
Не предлагай замену узлов
без проверки
Ограничения отсекают то, что вы уже проверили, и то, что вам не подходит
Часть 5 из 6
Формат ответа как его оформить
| Причина | Как проверить | Чем измерить | Ожидаемый результат |
|---|---|---|---|
От формата зависит, сколько работы у вас останется после ответа
Часть 6 из 6
Критерии проверки по чему вы поймёте, что ответ годится
- Отдельно объясни превышение 40 мА и снижение тока с 85 до 62 мА
- Допускай сочетание нескольких причин и укажи, какие измерения их различат
Критерии задают модели понятную цель и помогают вам оценить ответ
Часть 6 из 6
Критерии проверки по чему вы поймёте, что ответ годится
- Отдельно объясни превышение 40 мА и снижение тока с 85 до 62 мА
- Допускай сочетание нескольких причин и укажи, какие измерения их различат
Критерии задают модели понятную цель и помогают вам оценить ответ
Соберём всё вместе
Шесть частей читаются как один запрос
КонтекстЯ инженер-электрик, разбираю замечания по испытаниям системы электроснабжения 24 В грузового автомобиля.
ЗадачаПредложи возможные причины замечания З-2 и способы их проверить.
Исходные данные[описание узла, пункт 4.3 технического задания, текст замечания с цифрами]
ОграниченияГенератор и батареи исправны, их не рассматривай. Не предлагай замену узлов без проверки.
Формат ответаОтвет – таблицей: причина, как проверить, чем измерить, ожидаемый результат.
Критерии проверкиОтдельно объясни превышение 40 мА и снижение тока с 85 до 62 мА. Допускай сочетание нескольких причин и укажи, какие измерения их различат.
Соберём всё вместе
Шесть частей читаются как один запрос
КонтекстЯ инженер-электрик, разбираю замечания по испытаниям системы электроснабжения 24 В грузового автомобиля.
ЗадачаПредложи возможные причины замечания З-2 и способы их проверить.
Исходные данные[описание узла, пункт 4.3 технического задания, текст замечания с цифрами]
ОграниченияГенератор и батареи исправны, их не рассматривай. Не предлагай замену узлов без проверки.
Формат ответаОтвет – таблицей: причина, как проверить, чем измерить, ожидаемый результат.
Критерии проверкиОтдельно объясни превышение 40 мА и снижение тока с 85 до 62 мА. Допускай сочетание нескольких причин и укажи, какие измерения их различат.
Соберём всё вместе
Шесть частей читаются как один запрос
КонтекстЯ инженер-электрик, разбираю замечания по испытаниям системы электроснабжения 24 В грузового автомобиля.
ЗадачаПредложи возможные причины замечания З-2 и способы их проверить.
Исходные данные[описание узла, пункт 4.3 технического задания, текст замечания с цифрами]
ОграниченияГенератор и батареи исправны, их не рассматривай. Не предлагай замену узлов без проверки.
Формат ответаОтвет – таблицей: причина, как проверить, чем измерить, ожидаемый результат.
Критерии проверкиОтдельно объясни превышение 40 мА и снижение тока с 85 до 62 мА. Допускай сочетание нескольких причин и укажи, какие измерения их различат.
Соберём всё вместе
Шесть частей читаются как один запрос
КонтекстЯ инженер-электрик, разбираю замечания по испытаниям системы электроснабжения 24 В грузового автомобиля.
ЗадачаПредложи возможные причины замечания З-2 и способы их проверить.
Исходные данные[описание узла, пункт 4.3 технического задания, текст замечания с цифрами]
ОграниченияГенератор и батареи исправны, их не рассматривай. Не предлагай замену узлов без проверки.
Формат ответаОтвет – таблицей: причина, как проверить, чем измерить, ожидаемый результат.
Критерии проверкиОтдельно объясни превышение 40 мА и снижение тока с 85 до 62 мА. Допускай сочетание нескольких причин и укажи, какие измерения их различат.
Семь-восемь строк
Сколько это занимает
Без них ответ, скорее всего, придётся переделывать
Требования и ошибка
Про критерии · круглый стол по безопасной разработке, октябрь 2026
Если требования есть и поведение им не соответствует, это ошибка. А если требований нет – это, как говорят программисты, фича
Критерии и проверка
С моделью похоже
Не сказали, по чему примете ответ
Труднее оценить, годится ли он для вашей задачи
Фактические ошибки проверяем в любом случае
- арифметика
- выдуманный пункт
- противоречие физике
Критерии и проверка
С моделью похоже
Не сказали, по чему примете ответ
Труднее оценить, годится ли он для вашей задачи
Фактические ошибки проверяем в любом случае
- арифметика
- выдуманный пункт
- противоречие физике
Как я объясняю это студентам
Шесть частей – четыре простых вопроса
Пример
Студент просит модель сделать учебное приложение
Я выполняю задание преподавателя по такой-то дисциплине.
Мне нужна база данных на конкретной системе.
Работать в ней будет менеджер с одной ролью.
Разных ролей не надо.
Последняя фраза экономит и модели, и вам кучу лишней работы
Пример
Студент просит модель сделать учебное приложение
Я выполняю задание преподавателя по такой-то дисциплине.
Мне нужна база данных на конкретной системе.
Работать в ней будет менеджер с одной ролью.
Разных ролей не надо.
Последняя фраза экономит и модели, и вам кучу лишней работы
Правильно скажи, что тебе надо
Студентам я говорю и так
Правильно скажи, что тебе надо
Чтобы правильно сказать, нужно самому понимать задачу на уровень выше
Модель не поставит задачу за вас. Она только хорошо выполнит ту, которую вы поставили
Практика 1.1, задание 2а
Запрос, который вы отправляли по замечанию З-3
Я инженер, разбираю замечание по испытаниям системы электроснабжения грузового автомобиля. Ниже описание узла и фрагмент технического задания.
[разделы 1 и 2 учебного кейса]
Замечание З-3: на холостом ходу при включённых фарах дальнего света и обогреве зеркал напряжение бортовой сети снижается до 26,1 В.
Предложи возможные причины и как проверить каждую. Ответ дай таблицей: причина – как проверить – что должно получиться.
Разбор по частям
Запрос из практики 1.1: что было, а чего не было
КонтекстЯ инженер, разбираю замечание по испытаниям системы электроснабжения грузового автомобиля
Исходные данныеОписание узла, фрагмент технического задания и само замечание
ЗадачаПредложить возможные причины и как проверить каждую
Формат ответаТаблица: причина – как проверить – что должно получиться
Ограниченияне было
Критерии проверкине было
Поэтому модель могла рассматривать что угодно и сама решала, когда ответ достаточно хорош
Разбор по частям
Запрос из практики 1.1: что было, а чего не было
КонтекстЯ инженер, разбираю замечание по испытаниям системы электроснабжения грузового автомобиля
Исходные данныеОписание узла, фрагмент технического задания и само замечание
ЗадачаПредложить возможные причины и как проверить каждую
Формат ответаТаблица: причина – как проверить – что должно получиться
Ограниченияне было
Критерии проверкине было
Поэтому модель могла рассматривать что угодно и сама решала, когда ответ достаточно хорош
Разбор по частям
Запрос из практики 1.1: что было, а чего не было
КонтекстЯ инженер, разбираю замечание по испытаниям системы электроснабжения грузового автомобиля
Исходные данныеОписание узла, фрагмент технического задания и само замечание
ЗадачаПредложить возможные причины и как проверить каждую
Формат ответаТаблица: причина – как проверить – что должно получиться
Ограниченияне было
Критерии проверкине было
Поэтому модель могла рассматривать что угодно и сама решала, когда ответ достаточно хорош
Разминка перед практикой
Разминка перед практикой
Вспомните свой последний запрос к модели
и проверьте, каких из шести частей в нём не было
Карточка и запрос
Шесть частей и карточка задачи
В карточке задачи
В запросе
Исходные данные
Исходные данные
Ожидаемый результат
Задача и формат ответа
Критерии приёмки
Критерии проверки
Ограничения
Ограничения
в карточке этого нет
Контекст – одна фраза о том,
кто вы и о чём речь
Карточка и запрос
Шесть частей и карточка задачи
В карточке задачи
В запросе
Исходные данные
Исходные данные
Ожидаемый результат
Задача и формат ответа
Критерии приёмки
Критерии проверки
Ограничения
Ограничения
в карточке этого нет
Контекст – одна фраза о том,
кто вы и о чём речь
Карточка и запрос
Шесть частей и карточка задачи
В карточке задачи
В запросе
Исходные данные
Исходные данные
Ожидаемый результат
Задача и формат ответа
Критерии приёмки
Критерии проверки
Ограничения
Ограничения
в карточке этого нет
Контекст – одна фраза о том,
кто вы и о чём речь
Порядок работы
Сначала карточка, потом запрос
Карточка
В ожидаемом результате написано «разобраться»
Запрос
Задача в запросе будет размытой
Ответ модели
На размытую задачу – размытый текст
Вебинар для преподавателей
Год назад
Вебинар для преподавателей учебного центра, 17.09.2025: как языковые модели помогают в рутине
Запрос – техническое задание для модели
Одна мысль с того вебинара
Хороший запрос – это чёткое техническое задание для модели
Чем точнее задание, тем меньше времени вы потом тратите на правку
Что для этого нужно
Программировать не нужно
- Достаточно уметь ясно объяснить, чего вы хотите
- Вы каждый день читаете и пишете технические задания. Запрос к модели – то же самое, только короче
Правила для запроса
Преподавателю и инженеру
Преподавателям – три правила
- Укажите роль
- Укажите формат
- Укажите аудиторию и цель
Для инженерной задачи
этого мало
- Роль и формат остаются
- Добавляются исходные данные, ограничения и критерии проверки
У инженера ответ проверяется не вкусом, а цифрами
Приёмы, которые помогают
Семь приёмов
Все исходные данные сразу
Задача по шагам
Образец
Таблица
Вопросы модели
Ссылка на пункт
Доработка по ответу
Приём 1 из 7
Давать все исходные данные сразу
Модель не знает вашего узла
Если данных не хватает, она подставит типовые предположения. К вашему случаю они могут и не подойти
Приём 1 из 7
Цифры и номера пунктов – как есть
Вставить в запрос, а не пересказывать
Ток покоя через 30 мин после выключения зажигания – 85 мА, через 2 ч – 62 мА
Требование ТЗ (п. 4.3): ток покоя не более 40 мА через 30 мин после выключения зажигания
При пересказе теряются условия
- Через сколько минут
- При какой температуре
- В каком режиме
Приём 2 из 7
Разбивать задачу на шаги
Разберись с замечанием
Сравнить измеренное с требованием
Перечислить причины
Составить план проверки
Каждый шаг проще проверить
Приём 2 из 7 · научные работы
Методы декомпозиции задачи
На приёме «по шагам» построены методы, о них есть научные работы
- Сначала план или более простые подзадачи
- Затем выполнение по пунктам
Wang L. et al. Препринт arXiv, 2023 · doi.org/10.48550/arXiv.2305.04091; Zhou D. et al. Препринт arXiv, 2022 · doi.org/10.48550/arXiv.2205.10625
Простые подзадачи по очереди
Авторы одной из таких работ
Основная идея – разбить сложную задачу на ряд более простых подзадач и решать их последовательно
Zhou D. et al. Препринт arXiv, 2022 · doi.org/10.48550/arXiv.2205.10625
Другая работа
Слабые места рассуждения по шагам без примеров
Ошибки в вычислениях
Пропущенные шаги
Ошибки понимания смысла
Wang L. et al. Препринт arXiv, 2023 · doi.org/10.48550/arXiv.2305.04091
Совет студентам
Ещё один шаг – самый первый
Прежде чем решать, попросите модель проработать разные варианты решения
А что будет, если условия изменятся? Какие есть другие пути? Проработай это сначала
Длинная работа – по вехам
Второй совет
Длинную работу разбивайте на вехи
Не переходите к следующей, пока текущая не принята и не проверена
Сделали
Проверили
Приняли
Тогда дальше
Приём 3 из 7
Показать образец
Одна заполненная строка таблицы объясняет формат лучше абзаца описания
Модель повторит
Приём 4 из 7
Просить таблицу
Сплошной текст
Таблица
Таблицу проще
сверить с документом,
чем сплошной текст
Если ответ пойдёт дальше в работу, сразу назовите столбцы
Образец вместе с таблицей
Столбцы и одна своя строка
| Причина | Как проверить | Чем измерить | Какой результат подтвердит причину | |
|---|---|---|---|---|
| Ваша строка | ||||
| Модель | ||||
| Модель |
Вы пишете столбцы
Одна строка своими словами: так вы сами записали бы причину
Насколько подробно вы пишете, в каких единицах, как формулируете проверку
Остальные строки сделает так же
Образец вместе с таблицей
Столбцы и одна своя строка
| Причина | Как проверить | Чем измерить | Какой результат подтвердит причину | |
|---|---|---|---|---|
| Ваша строка | ||||
| Модель | ||||
| Модель |
Вы пишете столбцы
Одна строка своими словами: так вы сами записали бы причину
Насколько подробно вы пишете, в каких единицах, как формулируете проверку
Остальные строки сделает так же
Приём 5 из 7
Разрешить модели задавать вопросы
Если данных не хватает,
сначала задай мне уточняющие вопросы
Сначала модель расспрашивает автора
ИИ-митап ЦГУ, 06.11.2026 · как начинать большую работу
Просит модель сначала расспросить его самого. Откидывается в кресле и рассказывает свои мысли, а модель задаёт вопросы и вытаскивает то, что он не сказал бы сам
Сначала модель расспрашивает автора
ИИ-митап ЦГУ, 06.11.2026 · как начинать большую работу
Просит модель сначала расспросить его самого. Откидывается в кресле и рассказывает свои мысли, а модель задаёт вопросы и вытаскивает то, что он не сказал бы сам
Сначала контекст, потом план
Порядок работы
Сначала набирается база контекста, и только потом из неё получается план
Приём 6 из 7
Просить ссылку на источник внутри ваших данных
ПроверкаДля каждого вывода укажи пункт технического задания или номер замечания, на который опираешься
Ссылку на пункт легко проверить
Выдуманный пункт сразу заметен
Вспомните пункт, которого нет
В разделе 4 – ровно шесть пунктов
По п. 4.8 ТЗ допускается разряд батарей до 30 % без последствий для пуска
Ссылку на пункт, которого в разделе нет, вы увидите за секунду. Но только если попросили ссылку
Вспомните пункт, которого нет
В разделе 4 – ровно шесть пунктов
По п. 4.8 ТЗ допускается разряд батарей до 30 % без последствий для пуска
Ссылку на пункт, которого в разделе нет, вы увидите за секунду. Но только если попросили ссылку
Приём 7 из 7
Дорабатывать запрос по ответу
Модель ушла не туда – лучше уточнить запрос в том же диалоге
Не рассматривай генератор, сосредоточься на потребителях стоянки
Начинать всё заново не нужно
Приём 7 из 7
Дорабатывать запрос по ответу
Модель ушла не туда – лучше уточнить запрос в том же диалоге
Не рассматривай генератор, сосредоточься на потребителях стоянки
Начинать всё заново не нужно
Из вебинара для преподавателей
Как просто уточнять ответ
Не подошёл – напишите одной строкой
Сделай проще
Добавь пример
Сократи до трёх строк
Модель перепишет ответ, а вы не потеряете то, что в нём уже было хорошего
Пиков В. А. LLMs – ваш цифровой помощник в преподавании. Вебинар для преподавателей, 17.09.2025
Приём 7 из 7
Тот же диалог или новый чат
Модель ушла не туда
Уточнить запрос в том же диалоге
Диалог запутался
Открыть новый чат и сразу дать полный исправленный запрос
Для тех, кто уже уверенно работает с моделью
И ещё два приёма
Запрос к запросу
Модель сама составляет подробный запрос
Самопроверка
Модель проверяет свой ответ по исходному тексту
Запрос к запросу
Пусть модель сама составит запрос
Напиши подробный запрос к языковой модели для разбора замечания З-2 по описанию узла, которое я вставлю ниже. В запросе должны быть контекст, исходные данные, ограничения, формат ответа и критерии проверки
Модель составляет подробный запрос
Отправьте его в новом чате
Сравните ответ со своим
Что модель добавила?
А что упустила?
Запрос к запросу
Пусть модель сама составит запрос
Напиши подробный запрос к языковой модели для разбора замечания З-2 по описанию узла, которое я вставлю ниже. В запросе должны быть контекст, исходные данные, ограничения, формат ответа и критерии проверки
Модель составляет подробный запрос
Отправьте его в новом чате
Сравните ответ со своим
Что модель добавила?
А что упустила?
Второй приём
Самопроверка
Попросите модель проверить свой ответ по исходному тексту и перечислить, что она исправила бы
Самопроверка полезна, но вашу собственную она не заменяет
Модель соглашается со своими ошибками
Вебинар о проверке кода, который пишут агенты
Модель охотно
соглашается со своими же ошибками
Она может пропустить ровно то, что пропустила в первый раз
Практика 1.2 · упражнения по желанию
Оба приёма есть в дополнительных заданиях
Запрос к запросу
Модель проверяет себя
Запрос к запросу – дальше на живом примере из вебинара для преподавателей
Живой пример
Задача: тест для итоговой проверки слушателей
Неправильные варианты должны быть близки по смыслу
Живой пример
Модель сначала составляет запрос
Задача – коротко, своими словами
Просьба к модели
Не отвечать, а сначала составить по этой задаче подробный запрос
Живой пример
Что расписала модель
- Цель
- Опираться только на текст постановлений
- Равномерный охват тем
- Точный формат вопроса
Основание к каждому вопросу
Номер постановления и пункт
Получилось почти готовое техническое задание
Живой пример
Один запрос – три разных сервиса
Запрос был один и тот же
Первый сервис
Основание указано у каждого вопроса
Второй сервис
Основание указано у каждого вопроса
Третий сервис
Это требование пропустил
Основание проверять в первую очередь
Основание у вопроса
Очень удобно: проверить вопрос можно за минуту
Но именно его и надо
проверять в первую очередь
Пункт может существовать и при этом говорить о другом
Приёмы · границы ответа
Фразы, которые задают границы ответа
Agentic Design Patterns
Кирилл Мокевнин · книга о паттернах агентного программирования
- Короткие фразы, которые программисты вписывают в постоянные инструкции агента
- Написаны для работы с кодом, но хорошо переносятся на инженерные запросы
- По сути, это граничные условия для модели
Мокевнин К. Agentic Design Patterns. Приложение «Фразы для AGENTS.md»
Приёмы · границы ответа
Фразы, которые задают границы ответа
Agentic Design Patterns
Кирилл Мокевнин · книга о паттернах агентного программирования
- Короткие фразы, которые программисты вписывают в постоянные инструкции агента
- Написаны для работы с кодом, но хорошо переносятся на инженерные запросы
- По сути, это граничные условия для модели
Мокевнин К. Agentic Design Patterns. Приложение «Фразы для AGENTS.md»
Фразы 1–3 из шести
Источник, допущения, что проверено
В книге: «Предпочитайте проверку источников знаниям модели из обучения»
«Опирайся на приложенный документ, а не на общие знания. Если в документе этого нет, так и скажи»
Меньше выдуманных пунктов, значений и стандартов
В книге: «Явно называйте допущения, которые меняют поведение решения»
«Перечисли допущения, от которых зависит результат»
Сразу видно, где модель додумала за вас
В книге: «Сообщайте, что проверено и что проверить не удалось»
«Отдельно напиши, что ты сверил с документом, а что нет»
Понятно, что проверять в первую очередь
Фразы 1–3 из шести
Источник, допущения, что проверено
В книге: «Предпочитайте проверку источников знаниям модели из обучения»
«Опирайся на приложенный документ, а не на общие знания. Если в документе этого нет, так и скажи»
Меньше выдуманных пунктов, значений и стандартов
В книге: «Явно называйте допущения, которые меняют поведение решения»
«Перечисли допущения, от которых зависит результат»
Сразу видно, где модель додумала за вас
В книге: «Сообщайте, что проверено и что проверить не удалось»
«Отдельно напиши, что ты сверил с документом, а что нет»
Понятно, что проверять в первую очередь
Фразы 1–3 из шести
Источник, допущения, что проверено
В книге: «Предпочитайте проверку источников знаниям модели из обучения»
«Опирайся на приложенный документ, а не на общие знания. Если в документе этого нет, так и скажи»
Меньше выдуманных пунктов, значений и стандартов
В книге: «Явно называйте допущения, которые меняют поведение решения»
«Перечисли допущения, от которых зависит результат»
Сразу видно, где модель додумала за вас
В книге: «Сообщайте, что проверено и что проверить не удалось»
«Отдельно напиши, что ты сверил с документом, а что нет»
Понятно, что проверять в первую очередь
Пример · замечание З-2
Как это выглядит в ответе
Перечисли допущения, от которых зависит результат
Считаю, что ток измерен после того, как все блоки перешли в дежурный режим
Считаю, что дополнительное оборудование на образце не установлено
Каждое допущение – готовый вопрос к испытателям. Если оно неверно, вывод модели надо пересматривать. Без этой фразы вы бы о нём не узнали
Пример · замечание З-2
Как это выглядит в ответе
Перечисли допущения, от которых зависит результат
Считаю, что ток измерен после того, как все блоки перешли в дежурный режим
Считаю, что дополнительное оборудование на образце не установлено
Каждое допущение – готовый вопрос к испытателям. Если оно неверно, вывод модели надо пересматривать. Без этой фразы вы бы о нём не узнали
Пример · замечание З-2
Как это выглядит в ответе
Перечисли допущения, от которых зависит результат
Считаю, что ток измерен после того, как все блоки перешли в дежурный режим
Считаю, что дополнительное оборудование на образце не установлено
Каждое допущение – готовый вопрос к испытателям. Если оно неверно, вывод модели надо пересматривать. Без этой фразы вы бы о нём не узнали
Фразы 4–6 из шести
Причина, готовые решения, границы задачи
| В книге | В инженерной задаче | Что меняется |
|---|---|---|
| «Найди и исправь причину ошибки» | «Ищи причину замечания, а не способ его закрыть» | Ответ про физику узла, а не про формулировку |
| «Предпочитай зрелые, поддерживаемые библиотеки самописным реализациям» | «Сначала предложи стандартные и покупные решения, потом – своё» | Меньше приходится изобретать то, что уже есть |
| «Сохраняйте границы поставленной задачи» | «Не меняй то, о чём не просили» | При правке технического задания или письма соседние пункты остаются целы |
Фразы 4–6 из шести
Причина, готовые решения, границы задачи
| В книге | В инженерной задаче | Что меняется |
|---|---|---|
| «Найди и исправь причину ошибки» | «Ищи причину замечания, а не способ его закрыть» | Ответ про физику узла, а не про формулировку |
| «Предпочитай зрелые, поддерживаемые библиотеки самописным реализациям» | «Сначала предложи стандартные и покупные решения, потом – своё» | Меньше приходится изобретать то, что уже есть |
| «Сохраняйте границы поставленной задачи» | «Не меняй то, о чём не просили» | При правке технического задания или письма соседние пункты остаются целы |
Фразы 4–6 из шести
Причина, готовые решения, границы задачи
| В книге | В инженерной задаче | Что меняется |
|---|---|---|
| «Найди и исправь причину ошибки» | «Ищи причину замечания, а не способ его закрыть» | Ответ про физику узла, а не про формулировку |
| «Предпочитай зрелые, поддерживаемые библиотеки самописным реализациям» | «Сначала предложи стандартные и покупные решения, потом – своё» | Меньше приходится изобретать то, что уже есть |
| «Сохраняйте границы поставленной задачи» | «Не меняй то, о чём не просили» | При правке технического задания или письма соседние пункты остаются целы |
Фразы не заменяют данных и проверки
Одно предупреждение
Фразы не заменяют исходных данных и проверки
Модель может написать «сверено» и ошибиться
Но они делают её работу видимой, и проверять становится проще
Откуда эти фразы
Файл инструкций и шаблон запроса
Агент, который пишет код
- Перед каждой задачей читает файл с постоянными инструкциями
- Фразы вписывают туда, чтобы не повторять их в каждом запросе
Обычный чат
- Такого файла может не быть
- Нужные фразы проще держать в своём шаблоне запроса и вставлять каждый раз
Откуда эти фразы
Файл инструкций и шаблон запроса
Агент, который пишет код
- Перед каждой задачей читает файл с постоянными инструкциями
- Фразы вписывают туда, чтобы не повторять их в каждом запросе
Обычный чат
- Такого файла может не быть
- Нужные фразы проще держать в своём шаблоне запроса и вставлять каждый раз
Риски
Чего опасаться в самом запросе
1. Неверная посылка
В вопрос заложено ошибочное утверждение. Модель обычно принимает его и развивает дальше
2. Лишнее в запросе
3. Служебные сведения
Неверная посылка · исследование 2025 года
Клинические вопросы с выдуманной деталью
Клинический вопрос
+ 1 выдуманная детальКаждый вопрос дополнили одной выдуманной деталью
Omar M. et al. Communications Medicine, 2025 · doi.org/10.1038/s43856-025-01021-3
Неверная посылка · то же исследование
Что даёт инструкция в запросе
Добавили к запросуОпираться только на подтверждённые сведения и прямо говорить о неопределённости
Доля ответов с подхваченной деталью, в среднем
Доля снижалась, но не до нуля
Omar M. et al. Communications Medicine, 2025 · doi.org/10.1038/s43856-025-01021-3
Как это проверяли
Какие детали добавляли в вопрос
Деталь звучала правдоподобно, и модель строила на ней ответ, как будто такое бывает
Omar M. et al. Communications Medicine, 2025 · doi.org/10.1038/s43856-025-01021-3
Неверная посылка · учебный узел ЭС-24
То же на нашем узле
Ток покоя через два часа упал до 62 мА, значит, к концу стоянки он сам придёт в норму. Помоги обосновать, что замечание можно закрыть
Охотно напишет обоснование
Из того, что ток снизился, не следует, что он опустится ниже 40 мА
Ошибка заложена в сам вопрос. Модель, скорее всего, не станет её поправлять, а будет помогать
Неверная посылка · учебный узел ЭС-24
То же на нашем узле
Ток покоя через два часа упал до 62 мА, значит, к концу стоянки он сам придёт в норму. Помоги обосновать, что замечание можно закрыть
Охотно напишет обоснование
Из того, что ток снизился, не следует, что он опустится ниже 40 мА
Ошибка заложена в сам вопрос. Модель, скорее всего, не станет её поправлять, а будет помогать
Неверная посылка · учебный узел ЭС-24
То же на нашем узле
Ток покоя через два часа упал до 62 мА, значит, к концу стоянки он сам придёт в норму. Помоги обосновать, что замечание можно закрыть
Охотно напишет обоснование
Из того, что ток снизился, не следует, что он опустится ниже 40 мА
Ошибка заложена в сам вопрос. Модель, скорее всего, не станет её поправлять, а будет помогать
Неверная посылка · ещё пример
Ошибка в цифре
Почему при +25 °C регулятор держит 29 В и как это обосновать?
29 В в допуск не попадает. Если вы ошиблись в цифре, модель вряд ли вас поправит. Скорее она начнёт обосновывать
Неверная посылка · ещё пример
Ошибка в цифре
Почему при +25 °C регулятор держит 29 В и как это обосновать?
29 В в допуск не попадает. Если вы ошиблись в цифре, модель вряд ли вас поправит. Скорее она начнёт обосновывать
Вывод для инженера
Что из этого следует
Допущение пишем как допущение
Как факт
«Генератор исправен»
Как допущение
«Предположим, что генератор исправен»
Полезно попроситьЕсли какие-то из моих исходных данных противоречат друг другу или физике, скажи об этом
Вывод для инженера
Что из этого следует
Допущение пишем как допущение
Как факт
«Генератор исправен»
Как допущение
«Предположим, что генератор исправен»
Полезно попроситьЕсли какие-то из моих исходных данных противоречат друг другу или физике, скажи об этом
Чего опасаться · второе
Лишнее в запросе
Длинная переписка
вставлена целиком- Длинная переписка, вставленная целиком, мешает больше, чем помогает
- Модель может зацепиться за случайную фразу
- Оставляйте только то, что относится к задаче
Лишнее в запросе
Что обычно оказывается лишним
Перед отправкой перечитайте запрос глазами постороннего: всё ли здесь нужно, чтобы решить эту задачу
Лишнее в запросе
Что обычно оказывается лишним
Перед отправкой перечитайте запрос глазами постороннего: всё ли здесь нужно, чтобы решить эту задачу
Почему лишнее мешает · работа 2024 года
Где в длинном запросе стоит нужное
Модели искали нужный факт среди многих документов в длинном запросе
Справлялись лучше всего
Заметно хуже
Справлялись лучше всего
Так было даже у моделей, рассчитанных на длинный контекст
Liu N. F. et al. Transactions of the Association for Computational Linguistics, 2024 · doi.org/10.1162/tacl_a_00638
Почему лишнее мешает · работа 2024 года
Где в длинном запросе стоит нужное
Модели искали нужный факт среди многих документов в длинном запросе
Справлялись лучше всего
Заметно хуже
Справлялись лучше всего
Так было даже у моделей, рассчитанных на длинный контекст
Liu N. F. et al. Transactions of the Association for Computational Linguistics, 2024 · doi.org/10.1162/tacl_a_00638
Главное – в начало или в конец запроса
Практический совет
Задачу и ключевые цифры ставьте в начало запроса или повторите в конце
Почему лишнее мешает · арифметические задачи
Одна лишняя фраза в условии
Арифметическая задача для школьников
+ 1 фразаФраза выглядит важной, но на решение не влияет
Авторы сообщили о снижении точности у всех проверенных моделей
Mirzadeh I. et al. GSM-Symbolic, 2024, препринт arXiv · doi.org/10.48550/arXiv.2410.05229
Почему лишнее мешает · арифметические задачи
Одна лишняя фраза в условии
Арифметическая задача для школьников
+ 1 фразаФраза выглядит важной, но на решение не влияет
Авторы сообщили о снижении точности у всех проверенных моделей
Mirzadeh I. et al. GSM-Symbolic, 2024, препринт arXiv · doi.org/10.48550/arXiv.2410.05229
Та же работа · оговорка
Перепроверка 2026 года
Авторы работы, 2024
- Точность снизилась у всех проверенных моделей
- У отдельных моделей падение достигало 65 %
Перепроверка, 2026
- Оспорила статистическую обоснованность общих выводов работы
- Сила эффекта у разных моделей оказалась разной
Długosz D. A. et al. Proceedings of EMNLP 2026 · aclanthology.org/2026.emnlp-main.1487
Каждая лишняя фраза – шанс зацепиться
Вывод для нас тот же
Каждая лишняя фраза в запросе – шанс, что модель за неё зацепится
Агенту – только то, что относится к задаче
Вебинар о проверке кода, который пишут агенты
Если загрузить агенту полную спецификацию статического анализатора, а потом попросить написать тесты, он будет запускать статический анализатор.
Слишком много информации ему давать незачем
Агент должен видеть ровно то, что относится к его задаче
Чего опасаться · третье
Служебные сведения
Правило с первого занятия
В сервисы отправляем только учебные и открытые материалы
Что и куда можно передавать – подробно во второй день, в теме 2.1
Раздел лекции
Что изменилось в новых моделях
Как меняется работа с запросами
Несколько лет назад
Заметный прирост давали две вещи
Примеры решений с промежуточными шагами
Простая приписка к запросу
«давай рассуждать пошагово»
Модель расписывала шаги и реже ошибалась в задачах с вычислениями
Цепочка рассуждений: работа 2022 года
Работа 2022 года
Построение цепочки рассуждений – последовательности промежуточных шагов – значительно улучшает способность больших языковых моделей выполнять сложные рассуждения
Wei J. et al. Chain-of-Thought Prompting Elicits Reasoning in Large Language Models, 2022 · doi.org/10.48550/arXiv.2201.11903
Сейчас
Отдельный режим рассуждения
Раньше
Модель просили: «давай рассуждать пошагово»
Сейчас
- Режим рассуждения есть во многих сервисах
- Модель сама строит цепочку шагов
- Просить её об этом уже не нужно
Работа 2025 года
Сложные техники запроса и простые
- Что сравнили
- Несколько техник запроса с рассуждением по шагам
- Результат
- Усложнённые варианты не дали статистически значимого преимущества перед более простыми
- Что влияло сильнее
- Модель и тип данных
Jeon S., Kim H.-G. Computers in Biology and Medicine, 2025 · doi.org/10.1016/j.compbiomed.2025.110614
Вывод авторов и оговорка
Вывод авторов
Сложные техники составления запросов не дают значимого улучшения по сравнению с более простыми подходами
Это одно исследование в одной области. Переносить его на инженерные задачи нужно осторожно
Jeon S., Kim H.-G. Computers in Biology and Medicine, 2025 · doi.org/10.1016/j.compbiomed.2025.110614
Аналогия: кабина самолёта
Аналогия из лекций
Кабина пассажирского лайнера
Сколько в ней тумблеров?
Аналогия из лекций
Тумблеры запроса: раньше и теперь
Раньше
Приходилось щёлкать множество тумблеров
Теперь
Лишние тумблеры постепенно убирают
Модели стали умнее
Вывод
Что из этого следует на практике
«Волшебная фраза»
Искать её – не лучшая трата времени
По-прежнему важны
Полные исходные данные, понятная задача и формат ответа
Проверка результата
Нужна при любом запросе и в любой модели
Честная оговорка
Честная оговорка
Чем больше у модели доступа к вашим материалам, тем меньше значит формулировка и тем больше – сами материалы
Честная оговорка
Агент и обычный чат
Агент видит весь проект
Часто достаточно просто сказать, что сделать
Обычный чат
Модель знает только то, что вы ей написали
Для чата шесть частей запроса – не формальность
Выбор модели: реклама и рейтинги не подскажут
Выбор модели
Какая модель лучше для ваших задач, не скажет ни реклама, ни чужой рейтинг
Реклама
Чужой рейтинг
Выбирать по пилоту на своём материале
Круглый стол по безопасной разработке, октябрь 2026
Выбирать инструмент – по пилоту на своём материале, а не потому, что кто-то показал на него пальцем
Для нас это значит
Пилот на своём материале
Одна и та же задача
Один и тот же запрос
Два-три сервиса
Сравнение по одной таблице критериев
Ровно то, что вы делали на практике 1.1
Насколько детерминирован результат?
Тот же круглый стол, октябрь 2026
Опасный тренд года – самописные агенты вместо классических инструментов анализа
Вопрос, который стоит задавать всегда
Насколько детерминирован результат?
Для нас
Тот же вопрос, что в первой теме
Модель
Помогает подготовить данные
Инструмент
Даёт один и тот же ответ на одних и тех же данных. Модель его не заменяет
Модель
Помогает описать результат
Павел Гагарин: три ступени работы с моделями
Вебинар о разработке с агентами, июль 2026
Павел Гагарин
вебинар «Разработка с агентами: от постановки задачи до деплоя», 28.07.2026
Три ступени работы с моделями
Павел Гагарин
Запрос, контекст, цикл
Инженерия запроса
Как сформулировать один вопрос: какую роль, примеры и формат задать
Инженерия контекста
«Не как спросить, а что показать модели» – документы и данные
Инженерия цикла
Не один ответ, а управляемый процесс со стадиями, проверками и границами для человека
По вебинару П. Гагарина «Разработка с агентами: от постановки задачи до деплоя», 28.07.2026
Павел Гагарин
Запрос, контекст, цикл
Инженерия запроса
Как сформулировать один вопрос: какую роль, примеры и формат задать
Инженерия контекста
«Не как спросить, а что показать модели» – документы и данные
Инженерия цикла
Не один ответ, а управляемый процесс со стадиями, проверками и границами для человека
По вебинару П. Гагарина «Разработка с агентами: от постановки задачи до деплоя», 28.07.2026
Павел Гагарин
Запрос, контекст, цикл
Инженерия запроса
Как сформулировать один вопрос: какую роль, примеры и формат задать
Инженерия контекста
«Не как спросить, а что показать модели» – документы и данные
Инженерия цикла
Не один ответ, а управляемый процесс со стадиями, проверками и границами для человека
По вебинару П. Гагарина «Разработка с агентами: от постановки задачи до деплоя», 28.07.2026
Та же история – студентам
Путь, который мы прошли
- ЗапросыСоставление запросов
- КонтекстРабота с контекстом
- ЦиклМодель работает долго, и в нужный момент ей добавляют нужный контекст и задачи
Сильные инструменты и упряжка
Вебинар о проверке кода, который пишут агенты, август 2026
Хотите более сильного агента – полируйте не ваш запрос, а дайте ему сильные инструментыМодели – лошадки, которых мы запрягаем. Управляем мы ими с помощью упряжки. И упряжка – самое ценное
Сильные инструменты и упряжка
Вебинар о проверке кода, который пишут агенты, август 2026
Хотите более сильного агента – полируйте не ваш запрос, а дайте ему сильные инструментыМодели – лошадки, которых мы запрягаем. Управляем мы ими с помощью упряжки. И упряжка – самое ценное
Мысль, особенно понятная испытателям
Сначала договориться о проверке
Контракт с агентом
Алексей Цымлов, вебинар о проверке кода
Договариваются заранее: задача не считается сделанной, пока не пройдут команды проверки
Программа и методика испытаний
То же самое в вашей работе
Сначала договорились, как будем проверять, потом принимаем работу
Мысль, особенно понятная испытателям
Сначала договориться о проверке
Контракт с агентом
Алексей Цымлов, вебинар о проверке кода
Договариваются заранее: задача не считается сделанной, пока не пройдут команды проверки
Программа и методика испытаний
То же самое в вашей работе
Сначала договорились, как будем проверять, потом принимаем работу
Вывод для инженера
Вывод для инженера
Хорошая формулировка важна.
Ещё важнее – какие исходные данные получила модель и как проверяется результат
Пример из занятий
Цикл на практике
Для длинной работы агенту ставят задачу и условие окончания
ЗадачаУчебный калькулятор
Условие окончанияГотов, когда проверен в трёх браузерах и выложен на сервер
Пока условие не выполнено, агент продолжает работать и проверять себя
Пример из занятий
Цикл на практике
Для длинной работы агенту ставят задачу и условие окончания
ЗадачаУчебный калькулятор
Условие окончанияГотов, когда проверен в трёх браузерах и выложен на сервер
Пока условие не выполнено, агент продолжает работать и проверять себя
Пример из занятий
Каждая веха – отдельным файлом
Веха
файлВеха
файл- Инструкция для модели
- Напоминание для себя
Роль человека
Человек остаётся руководителем
Для вас, инженеров
Главное – первые две ступени
Ясный запрос
Правильные исходные данные
Цикл
Пока не главное. Но знать, куда всё движется, полезно
Павел Гагарин · вебинар о разработке с агентами
Мысли, полезные и в обычном чате
- Чем плох агент без процесса
- Вопросы
- Критерий успеха
Мысль первая
Чем плох агент без процесса
Уверенно делает не то
Молча додумывает решения
Те, которые должен был принять человек
Мысль вторая – о вопросах
Пробелы в задаче – двух сортов
Меняет то, что увидит пользователь
Агент задаёт вопрос автору задачи – с вариантами и своей рекомендацией. Автору остаётся выбрать букву
Мелкий технический
Агент закрывает сам и записывает в раздел «Предположения» – с обоснованием в одну строку
Мысль вторая – о вопросах
Пробелы в задаче – двух сортов
Меняет то, что увидит пользователь
Агент задаёт вопрос автору задачи – с вариантами и своей рекомендацией. Автору остаётся выбрать букву
Мелкий технический
Агент закрывает сам и записывает в раздел «Предположения» – с обоснованием в одну строку
Приём для любого запроса
Допишите в свой запрос
ВопросыЕсли данных не хватает, задай вопросы с вариантами ответа и своей рекомендацией,
Допущенияа мелкие допущения перечисли отдельно
Отвечать на такие вопросы гораздо быстрее, чем на открытые
Мысль третья
Критерий успеха
| Не критерий | Критерий | |
|---|---|---|
| У Гагарина | «Код написан» | Сценарий и результат |
| По-нашему | «Ответ получен» | По ответу можно составить план проверки, и каждая причина в нём связана с нашими цифрами |
Мысль третья
Критерий успеха
| Не критерий | Критерий | |
|---|---|---|
| У Гагарина | «Код написан» | Сценарий и результат |
| По-нашему | «Ответ получен» | По ответу можно составить план проверки, и каждая причина в нём связана с нашими цифрами |
Замечания людей – в отдельный файл
Ещё деталь из его процесса
Замечания людей
отдельный файлЗамечания людей записываются в отдельный файл и не испаряются в чате
Агенты – конвейер, люди – границы
Итоговая формула
Агенты – конвейер,
люди – границы
В пятом модуле мы к этому вернёмся
Запрос помогает, но не спасает
Фраза, которую стоит запомнить
Составление запросов уменьшает число ошибок, но не устраняет их
Omar M. et al. Communications Medicine, 2025 · doi.org/10.1038/s43856-025-01021-3
Хороший запрос – не гарантия
Что это значит
Хороший запрос – не гарантия правильного ответа
Он делает ошибку реже
и заметнее
А найти её – по-прежнему ваша работа
На практике
Лестница запроса заканчивается проверкой
Одна строка
Факты из замечания
Требование и описание узла
Ограничения и формат
Критерии проверки и вопросы
Ошибки могут остаться и здесь
Проверка по вашему чек-листу
Исследование 2024 года
Вопросы о судебных решениях
Авторы проверяли, как модели отвечают на юридические вопросы
- Плохо предсказывают собственные галлюцинации
- Часто некритично принимают неверные юридические допущения пользователей
Dahl M. et al. Journal of Legal Analysis, 2024 · doi.org/10.1093/jla/laae003
Исследование 2024 года
Вопросы о судебных решениях
Авторы проверяли, как модели отвечают на юридические вопросы
- Плохо предсказывают собственные галлюцинации
- Часто некритично принимают неверные юридические допущения пользователей
Dahl M. et al. Journal of Legal Analysis, 2024 · doi.org/10.1093/jla/laae003
Проверять по источнику, а не по уверенности модели
Середина этой фразы
Модели плохо предсказывают
собственные ошибки
Ты уверена?
Помогает мало: модель может уверенно подтвердить неверное
Проверять нужно по источнику, а не по уверенности модели
Исследование 2025 года
Что будет, если модели возразить
Три популярные модели
Задачи по математике и медицинские вопросы
Возражение
На ответ модели возражали
Fanous A. et al. AAAI/ACM Conference on AI, Ethics, and Society, 2025 · doi.org/10.1609/aies.v8i1.36598
Результат
Модель меняет ответ под возражение
Чаще всего верный ответ ломался, когда возражение подкрепляли ссылкой на источник
Доля случаев. Fanous A. et al. AAAI/ACM Conference on AI, Ethics, and Society, 2025 · doi.org/10.1609/aies.v8i1.36598
Сомневаетесь в ответе – проверьте сами
Вывод простой
Сомневаетесь в ответе – не давите на модель, проверьте сами
А если всё-таки спорите, давайте ей исходные данные, а не своё мнение
Кто не додумал
ИТ-форум «Цифровые решения», октябрь 2026
Если агент с полномочиями сделал что-то не то, то кто не додумал? Человек не додумал
С запросом то же самое
Если в запросе не было условия,
спрашивать с модели бессмысленно
Шаблон запроса
Теперь – шаблон запроса
Копируйте и заполняйте
Сохраните шаблон себе: он понадобится до конца курса
Шаблон запроса
Читаем по строкам
Контекстя [должность], работаю с [узел/документ]
Задача[что нужно получить]
Исходные данные[вставить текст, цифры, пункты]
Ограничения[что считать заданным, чего не делать]
Формат ответа[таблица со столбцами … / список / не более N строк]
Проверкадля каждого вывода укажи, на какой пункт исходных данных он опирается
Шаблон запроса
Читаем по строкам
Контекстя [должность], работаю с [узел/документ]
Задача[что нужно получить]
Исходные данные[вставить текст, цифры, пункты]
Ограничения[что считать заданным, чего не делать]
Формат ответа[таблица со столбцами … / список / не более N строк]
Проверкадля каждого вывода укажи, на какой пункт исходных данных он опирается
Шаблон запроса
Читаем по строкам
Контекстя [должность], работаю с [узел/документ]
Задача[что нужно получить]
Исходные данные[вставить текст, цифры, пункты]
Ограничения[что считать заданным, чего не делать]
Формат ответа[таблица со столбцами … / список / не более N строк]
Проверкадля каждого вывода укажи, на какой пункт исходных данных он опирается
Строки-ограничения
Что стоит дописать в шаблон
- Опирайся только на исходные данные. Если чего-то в них нет, так и скажи
- Перечисли допущения, от которых зависит результат
- В конце отдельно: что ты сверил с исходными данными, а что проверить не удалось
- Если данных не хватает или они противоречат друг другу, сначала задай вопросыпоследняя строка шаблона
Первые три строки – по книге К. Мокевнина «Agentic Design Patterns»
Строки-ограничения
Что стоит дописать в шаблон
- Опирайся только на исходные данные. Если чего-то в них нет, так и скажи
- Перечисли допущения, от которых зависит результат
- В конце отдельно: что ты сверил с исходными данными, а что проверить не удалось
- Если данных не хватает или они противоречат друг другу, сначала задай вопросыпоследняя строка шаблона
Первые три строки – по книге К. Мокевнина «Agentic Design Patterns»
Как пользоваться шаблоном
Заполнять целиком не обязательно
Простой вопрос
Хватит двух-трёх строк
Ответ не устроил
Пройдитесь по шаблону и посмотрите, чего не хватило
Заполненный шаблон увидите на практике
Лестница запроса для замечания З-2
Одна строка
Факты из замечания
Требование и описание узла
Ограничения и формат
Критерии проверки и вопросы
Это и есть заполненный шаблон
Ступень 5
Шаблон, заполненный для замечания З-2
Контекстопытный образец грузового автомобиля с бортовой сетью 24 В
Задачапочему ток покоя такой большой – вопрос остаётся с первых ступеней
Исходные данныеток покоя 85 мА через 30 мин и 62 мА через 2 ч; требование п. 4.3; потребители на стоянке; батареи
Ограничениягенератор и батареи считать исправными, замену узлов без проверки не предлагать
Форматтаблица из четырёх столбцов
Критерииотдельно объяснить превышение и снижение тока; допускать сочетание причин; для каждого вывода указать, на какие данные он опирается
Вопросыразрешение задать вопросы
Ступень 5
Шаблон, заполненный для замечания З-2
Контекстопытный образец грузового автомобиля с бортовой сетью 24 В
Задачапочему ток покоя такой большой – вопрос остаётся с первых ступеней
Исходные данныеток покоя 85 мА через 30 мин и 62 мА через 2 ч; требование п. 4.3; потребители на стоянке; батареи
Ограничениягенератор и батареи считать исправными, замену узлов без проверки не предлагать
Форматтаблица из четырёх столбцов
Критерииотдельно объяснить превышение и снижение тока; допускать сочетание причин; для каждого вывода указать, на какие данные он опирается
Вопросыразрешение задать вопросы
Ступень 5
Шаблон, заполненный для замечания З-2
Контекстопытный образец грузового автомобиля с бортовой сетью 24 В
Задачапочему ток покоя такой большой – вопрос остаётся с первых ступеней
Исходные данныеток покоя 85 мА через 30 мин и 62 мА через 2 ч; требование п. 4.3; потребители на стоянке; батареи
Ограничениягенератор и батареи считать исправными, замену узлов без проверки не предлагать
Форматтаблица из четырёх столбцов
Критерииотдельно объяснить превышение и снижение тока; допускать сочетание причин; для каждого вывода указать, на какие данные он опирается
Вопросыразрешение задать вопросы
Первая и пятая ступени
Сравните
Ступень 1 – одна строка
Почему у грузовика большой ток покоя?
Ступень 5 – весь шаблон
Разница между ними – предмет нашей практики
Чек-лист проверки ответа
Чек-лист проверки ответа
Семь вопросов к ответу
Пройдите по ним перед тем, как использовать ответ в работе
Вопрос 1 из 7
Цифры совпадают с исходными данными?
Сверьте каждую цифру, которую модель взяла из запроса
Вопрос 2 из 7
Расчёты сходятся?
Повторите все расчёты, от которых зависит решение
Проверьте единицы измерения
Миллиамперы и амперы
Часы и сутки
Ампер-часы одной батареи и всей цепи
Вопрос 3 из 7
Ссылки на пункты документа
Документ
пункт- Существуют?
- Говорят то, что утверждает модель?
Вопрос 4 из 7
Нет ли утверждений, которых не было в исходных данных?
Отметьте каждое
Подтвердите
Источником, расчётом или измерением
Неподтверждённое
Не используйте как основание для решения
Гипотеза – это гипотеза, а не факт
Вопросы 5, 6 и 7
Ещё три вопроса к ответу
Физика и здравый смысл
Не противоречит ли вывод тому, что вы знаете об узле?
Та ли задача
Ответ решает поставленную задачу, а не соседнюю?
Что модель пропустила?
Сравните с тем, что вы сами ожидали увидеть
Почему чек-лист, а не просто внимательность
Почему чек-лист, а не просто внимательность
Тестирование может показать наличие дефектов в программе, но не доказать их отсутствие
Чем больше этапов контроля, тем больше мы уверены в результате
Чек-лист проверки ответа
Чек-лист – это и есть этапы контроля
- Цифры совпадают с исходными данными
- Расчёты сходятся, единицы на месте
- Ссылки на пункты существуют и говорят то же
- Новые утверждения отмечены и проверены, гипотезы не выданы за факты
- Не противоречит физике и опыту
- Решает поставленную задачу, а не соседнюю
- Ничего важного не пропущено
Свой вариант вы соберёте на практике. Его стоит держать под рукой до конца курса
Чек-лист превращается в автоматического ревьюера
Как чек-лист растёт
Чек-лист команды со временем превращается в автоматического ревьюера: то, что люди раз за разом проверяют руками, однажды начинают проверять программой
Инженерам это тоже знакомо
Как растёт проверка
По памяти
По чек-листу
По методике
Свой чек-лист
С чего начать
Начните с семи пунктов из лекции
Уберите то,
что вам не нужноДобавьте то, что вы проверяете всегда
После каждой найденной ошибки
После каждой найденной ошибки
Какой пункт чек-листа должен был её поймать?
Если такого пункта нет – допишите
Работа с ответом модели: от задачи до решения
Работа с ответом модели: от задачи до решения
Та же схема по шагам
От задачи до решения
Карточка задачи
Составляет инженер
Запрос
По карточке, из шести частей
Ответ
Модель отвечает
Проверка
По чек-листу
Годится
Идёт в работу, под ответственность инженера
Не годится
Уточняем запрос, добавляем данные и ограничения – и новая попытка
Та же схема по шагам
От задачи до решения
Карточка задачи
Составляет инженер
Запрос
По карточке, из шести частей
Ответ
Модель отвечает
Проверка
По чек-листу
Годится
Идёт в работу, под ответственность инженера
Не годится
Уточняем запрос, добавляем данные и ограничения – и новая попытка
Коротко повторим главное
Главное о запросах
- Модель отвечает на тот вопрос, который ей задали
- Всё, чего нет в запросе, она додумает
- Шесть частей запросаконтекстзадачаисходные данныеограниченияформаткритерии проверки
- Допущения – как допущения. Лишнее – убрать
Коротко повторим главное
Главное о запросах
- Модель отвечает на тот вопрос, который ей задали
- Всё, чего нет в запросе, она додумает
- Шесть частей запросаконтекстзадачаисходные данныеограниченияформаткритерии проверки
- Допущения – как допущения. Лишнее – убрать
Волшебной фразы нет
Главное
Волшебной фразы нет.
Есть полные данные и проверка
Шаблон запроса
Чек-лист проверки ответа
Скопируйте себе оба: они есть в тексте лекции на сайте курса.
Понадобятся уже через несколько минут
Практика
А теперь – к практике
Пройдём по лестнице запроса и посмотрим своими глазами, на какой ступени ответ становится пригодным для работы