Практика к теме 4.2. Таблица испытаний: анализ, проверка, раздел отчёта
Время: 4 академических часа (13:00–14:30 и 14:40–16:10). Что понадобится: доступ хотя бы к одному сервису, файл «Учебный кейс ЭС-24: дополнение к четвёртому дню» (разделы 5 и 6; требования – по редакции 1 ТЗ из кейса первого дня), калькулятор, табличный редактор, если он есть. Правило: в сервисы отправляем только учебные таблицы кейса. Реальные протоколы испытаний – только в сервисы, которые разрешены для таких данных правилами вашей организации. Обязательный минимум: задание 1 – ответ модели с пометками, задание 2а – таблица выборочного пересчёта по шести шагам и задание 3 (или вариант П) – раздел отчёта или протокол, который вы готовы подписать. По их образцу выполняются часть 2 самостоятельной работы и контрольная точка модуля 4. Задание 2б – если успеваете; задание повышенной сложности и упражнения в конце файла – по желанию и в своём темпе.
Задание 1. Разобрать с ИИ учебную таблицу испытаний (50 мин)
1а. Отправить таблицу (10 мин). Новый чат. Вставьте таблицу 1 текстом: она дана в разделе 5 дополнения к кейсу в виде строк с точкой с запятой. Если в вашем сервисе есть загрузка файлов, одному-двум слушателям по заданию преподавателя стоит дополнительно сохранить таблицу в файл TXT и отправить её файлом в отдельном чате: все ли строки сервис прочитал? Результат обсудим вместе.
Я инженер, разбираю результаты испытаний системы электроснабжения
грузового автомобиля 24 В. Испытано 10 образцов.
Ток покоя измерен при выключенном зажигании и включённом выключателе
массы через 30 мин и через 2 ч. Затем 14 суток стоянки при температуре
от −15 до −25 °C и замер напряжения разомкнутой цепи каждой батареи.
Требования (ТЗ, редакция 1):
– п. 4.3: ток покоя через 30 мин не более 40 мА;
– п. 4.5: напряжение каждой батареи после 14 суток не ниже 12,2 В.
Для тока через 2 ч требований нет.
[вставьте таблицу 1 текстом из раздела 5 дополнения к кейсу]
Задача:
1. Перепиши таблицу и проверь, что в ней 10 строк.
2. Для каждого образца оцени соответствие п. 4.3 и п. 4.5.
3. Посчитай для тока через 30 мин среднее, медиану, наименьшее
и наибольшее значение. Укажи, по каким образцам считал.
4. Найди выбросы и подозрительные значения. Не исправляй их,
а перечисли отдельно с объяснением.
5. Опиши тенденции, которые видны в таблице.
6. Предложи вид графика.
Не добавляй значений, которых нет в таблице, и не объясняй причины
отклонений: только то, что следует из данных.
1б. Прочитать ответ и отметить сомнительное (40 мин). Не пересчитывая пока ничего, пройдите по ответу и отметьте:
- все числа, которые выглядят подозрительно;
- все утверждения, которые не следуют из таблицы;
- что модель сделала с образцами О-05 и О-07;
- какой вид графика предложен и подходит ли он.
Если в группе работают в разных сервисах, сравните ответы двух сервисов по этим четырём пунктам.
Результат: ответ модели с пометками.
Задание 2. Проверить выводы модели выборочным пересчётом (70 мин)
2а. Свой ответ: выборочный пересчёт (40 мин)
Проверьте ответ, полученный в задании 1, по шести шагам из лекции. Числа считайте по исходной таблице, а не по таблице из ответа модели.
| Шаг | Что делаю | Результат |
|---|---|---|
| 1 | Считаю строки в ответе и сверяю идентификаторы О-01…О-10 | |
| 2 | Для каждого числа из вывода нахожу, откуда оно взято | |
| 3 | Пересчитываю среднее и медиану тока через 30 мин, наименьшее и наибольшее значение | |
| 4 | Сверяю каждое «соответствует» и «не соответствует» с п. 4.3 и п. 4.5: тот ли столбец, та ли граница | |
| 5 | Смотрю, что модель сделала с подозрительными значениями | |
| 6 | Вычёркиваю из вывода всё, что не следует из таблицы |
Если есть табличный редактор, вставьте таблицу в него. В Excel с русским интерфейсом среднее считает функция СРЗНАЧ, медиану – МЕДИАНА, число образцов с током больше 40 мА – формула вида =СЧЁТЕСЛИ(B2:B11;">40"). Без редактора медиану находят вручную: расположите десять значений по возрастанию и возьмите среднее пятого и шестого. Пример – в лекции 4.2, раздел 5. В других редакторах названия функций проверьте по справке.
Если ваше среднее не совпало со средним модели, выясните почему: по скольким строкам считала модель? Если не совпало стандартное отклонение – какое она считала, выборочное или по генеральной совокупности?
2б. Готовый ответ с ошибками (30 мин)
В разделе 6 дополнения к кейсу есть ответ модели по той же таблице, подготовленный для занятия. В нём специально оставлены ошибки. Найдите их той же шестишаговой проверкой.
| Фрагмент ответа | Что не так | Вид ошибки | Каким шагом проверки поймали |
|---|---|---|---|
Подсказка по видам ошибок: пропущенная строка, выдуманное значение, неверное среднее или отклонение, тихая правка данных, вывод шире данных, ложный итоговый вывод.
Задание 3. Подготовить раздел технического отчёта (40 мин)
По выбору. Испытатели, которые оформляют протоколы, могут вместо раздела отчёта оформить протокол испытаний по шаблону (вариант П в конце задания).
3а. Черновик от модели (15 мин). В том же чате, где разбиралась таблица, или в новом с той же таблицей отправьте запрос:
Подготовь раздел технического отчёта «Результаты испытаний на ток
покоя и сохранность заряда» по таблице выше. Структура:
1. Объект и условия испытаний.
2. Применимые требования (п. 4.3 и 4.5 ТЗ, редакция 1).
3. Результаты: основные статистики с указанием, по каким образцам
они посчитаны.
4. Несоответствия: поимённо, измеренное значение и требование.
5. Вопросы к данным: подозрительные значения, что предлагается сделать.
6. Выводы: только то, что следует из таблицы, с оговоркой
об объёме выборки.
Ограничения: не добавляй значений, которых нет в таблице; не объясняй
причины; подозрительные значения не исправляй; не используй слова
«стабильно» и «надёжно», если это не следует из данных.
3б. Довести раздел до готовности (25 мин). Проверьте черновик по результатам задания 2а и исправьте его вручную. Добавьте в конце раздела строку «Как проверено»: что пересчитано и что сверено с протоколом.
Результат: раздел отчёта, который вы готовы подписать, и список правок, внесённых вручную.
Вариант П. Протокол испытаний по шаблону
Вместо раздела отчёта можно оформить протокол – раздел 10 дополнения к кейсу. Время то же: 15 мин на черновик, 25 мин на проверку. Внимание: испытания проведены по ПМИ к редакции 2 ТЗ, требования берите из редакции 2.
Оформи протокол испытаний по учебному шаблону ниже. Требования бери
из пунктов ПМИ и редакции 2 ТЗ ниже; среднее по п. 5.3 посчитай
и покажи расчёт. Для каждого пункта: соответствует – да или нет.
Заключение – по правилу п. 5.12 ПМИ. Если каких-то сведений нет
(например, срока поверки), пиши «сведений нет», ничего не додумывай.
В конце отдельно: что взято из данных, а что ты вычислил.
[вставьте раздел 10 дополнения к кейсу, пункты 5.3, 5.4, 5.7, 5.8,
5.10–5.12 документа 6 и документ 5 дополнения ко второму дню]
Вместе с документами запрос длиннее 4000 символов. Если сервис ограничивает длину, отправляйте частями в одном чате, как в лекции 2.2 (раздел «Объём документа»): сначала документы с припиской «Пока ничего не делай, дождись задания», запрос – последним сообщением.
Проверьте:
- требования взяты из редакции 2 (30 мА через 60 мин, не менее 45 А), а не из редакции 1;
- среднее по п. 5.3 пересчитано вручную;
- по п. 5.8 оценена каждая клемма, а не среднее; смазка проверена отдельно;
- срок поверки амперметра не выдуман;
- заключение следует из п. 5.12: если хотя бы один пункт не выполнен, образец испытания не выдержал. «Выдержал с замечаниями» в правиле нет.
Задание повышенной сложности: Черновая выгрузка: паспорт таблицы и журнал подготовки данных (30–45 мин)
Для тех, кто справился с основными заданиями. Можно сделать и после занятия, в своём темпе.
В основных заданиях таблица была аккуратной: одна строка заголовка, одни единицы, у каждой строки идентификатор. Таблицы со стенда или от смежников часто приходят в другом виде. Здесь вы попросите модель привести неаккуратную выгрузку к виду, удобному для анализа, и проверите, не изменила ли она при этом данные. Заодно составите паспорт таблицы, о котором шла речь в лекции 4.2 (раздел 1).
Что получится: паспорт таблицы, подготовленная к анализу таблица, журнал подготовки (что преобразовано и что решил инженер) и список вопросов к данным. Паспорт и журнал можно взять шаблоном для своих протоколов. В части 2 самостоятельной работы в таблице 2 тоже есть подозрительное значение и пропущенный замер: журнал поможет записать, что вы с ними сделали.
Задание состоит из пяти коротких шагов, после каждого остаётся записанный результат: если отвлеклись, продолжайте со следующего шага. Его можно сделать и после занятия, в своём темпе: всё нужное – в этом файле и в дополнении к кейсу. Сдавать ничего не нужно, на итогах один-два слушателя могут рассказать, что получилось.
Учебная выгрузка (учебный документ, значения условные). Те же результаты, что в таблице 1 раздела 5 дополнения к кейсу, но в неаккуратной копии. Оформление испорчено нарочно. До шага 4 с самой таблицей 1 не сверяйтесь: в шаге 4 она играет роль протокола.
Испытания ЭС-24, ток покоя и U бат.;;;;
Образец;I покоя;;U после 14 сут;
;30 мин, мА;2 ч, мА;бат. 1, В;бат. 2, В
О-01;34,2;27,5;12,56;12,55
О-02;0,0368 А;0,0291 А;12,52;12,53
О-03;31.5;25.8;12.60;12.58
О-04;41,6;33,0;12,47;12,46
О-05;33,9;27,2;12,57;1,257
О-06;35,4;28,4;12,54;12,55
О-06;35,4;28,4;12,54;12,55
О-07;84,7;61,9;12,15;12,08
;32,7;26,3;12,59;12,57
О-10;35,0;28,0;12,55;12,56
О-09;37,9;30,2;12,51;12,50
Шаг 1. Осмотреть выгрузку без модели (5 мин). Пронумеруйте строки данных, начиная со строки О-01: это строка 1. Выпишите всё, что мешает считать: единицы, десятичный знак, заголовки, повторы, пропуски, подозрительные значения. Пока ничего не исправляйте.
Результат шага: ваш список того, что не так с выгрузкой.
Шаг 2. Паспорт таблицы (5–10 мин). Заполните паспорт по выгрузке и по описанию испытаний в разделе 5 дополнения к кейсу: нужны только абзацы «Что испытывали» и «Какие требования применимы», саму таблицу пока не смотрите. Если сведений нет, так и пишите: «сведений нет». Пустое поле паспорта – уже вопрос к тем, кто прислал таблицу.
| Поле паспорта | Запись |
|---|---|
| Что за таблица | |
| Чья таблица и какая версия | |
| Когда получена или обновлена | |
| Столбцы: величина и единица | |
| Условия замеров | |
| Применимые требования | |
| Сколько образцов должно быть и их идентификаторы | |
| К кому идти с вопросом |
Результат шага: заполненный паспорт.
Шаг 3. Запрос к модели (10 мин). Откройте новый чат и отправьте запрос, вставив паспорт и выгрузку.
Я инженер, готовлю к анализу черновую выгрузку результатов
испытаний. Данные учебные. Паспорт таблицы и выгрузка – ниже.
Подготовь таблицу к анализу по правилам:
1. Одна строка заголовка: в каждом столбце величина и единица.
Ток – в миллиамперах, напряжение – в вольтах, десятичный знак –
запятая. Других преобразований значений не делай.
2. Каждое преобразование запиши в журнал: строка выгрузки – было –
стало – что сделано.
3. Значения по смыслу не меняй. Повторы, пропуски, строки без
идентификатора и подозрительные значения не исправляй,
не удаляй и не заполняй, а вынеси в список «Вопросы к данным»
с объяснением.
4. Идентификаторы образцов не присваивай и не угадывай.
5. Итоговая таблица: номер строки выгрузки – образец – четыре
величины – статус строки (без замечаний / вопрос к данным).
6. В конце: сколько строк данных в выгрузке, сколько разных образцов
удалось опознать и каких идентификаторов из паспорта не хватает.
[вставьте паспорт таблицы]
[вставьте выгрузку]
Если ответ оборвался (в GigaChat ответ ограничен примерно 4000 символами), попросите продолжить по частям: сначала таблицу, потом журнал и вопросы к данным.
Результат шага: ответ модели: таблица, журнал и вопросы к данным.
Шаг 4. Проверить подготовку (10–15 мин). Сравните ответ модели с выгрузкой и со своим списком из шага 1. Смотрите прежде всего:
- все ли строки выгрузки есть в итоговой таблице, включая повтор и строку без идентификатора;
- не изменилось ли значение при переводе единиц;
- что модель сделала с 1,257 В у О-05;
- не присвоила ли модель строке без идентификатора номер образца;
- нет ли в журнале правок, которых правила не разрешали, и нет ли в таблице правок, которых нет в журнале.
| Строка выгрузки | Как в выгрузке | Что сделала модель | Допустимо по правилам запроса? | Моё решение |
|---|---|---|---|---|
Теперь откройте таблицу 1 в разделе 5 дополнения к кейсу: для этой выгрузки она служит протоколом. Сверьте с ней строки из вопросов к данным и запишите решение по каждой в журнал с пометкой «решение инженера, сверено с протоколом». Решение может быть и таким: «по протоколу не решается, нужна сверка с первичной записью измерения или повторный замер».
Результат шага: таблица проверки и журнал с вашими решениями.
Шаг 5. Собрать комплект (5 мин). Сохраните в один файл паспорт, подготовленную таблицу, журнал подготовки (преобразования модели и решения инженера) и вопросы к данным, которые остались открытыми.
Как понять, что получилось:
- в итоговой таблице модели столько же строк данных, сколько в выгрузке, или вы нашли, какие строки пропали;
- каждое преобразование единиц и десятичного знака есть в журнале в виде «было – стало», и ни одно значение не изменилось по смыслу;
- 1,257 В у О-05 осталось как есть и стоит в вопросах к данным; номер строке без идентификатора присвоили вы после сверки с протоколом, а не модель;
- после ваших решений подготовленная таблица совпадает с таблицей 1 значение в значение;
- в паспорте поля, о которых сведений нет, так и заполнены: «сведений нет».
Итоги дня (20 мин)
- Какая ошибка модели встретилась у группы чаще всего: в расчёте и в таблице?
- Какая проверка оказалась самой полезной на единицу затраченного времени?
- Что из сегодняшних приёмов можно перенести на свои расчёты и протоколы и что для этого нужно (сервис, табличный редактор, разрешение на данные)?
2–3 слушателя рассказывают свой результат, преподаватель подводит итог. Кто выполнил задание повышенной сложности, может рассказать, что модель сделала с черновой выгрузкой. Если желающих рассказать нет, преподаватель показывает типичный результат и сам подводит итог по двум-трём главным выводам.
Выдача домашнего задания и контрольной точки модуля 4 – файл в папке «05-Самостоятельная-работа».
Ещё упражнения по желанию
- Длинная таблица. Попросите модель размножить таблицу 1 до 60 строк с похожими значениями и вставьте в середину одну строку с током 44 мА. Затем в новом чате дайте эту таблицу на проверку. Найдёт ли модель строку в середине? Проверьте сами по своей копии таблицы.
- Разные раскладки. Отправьте таблицу 1 в другой раскладке: образцы по столбцам, величины по строкам. Изменились ли ответ и ошибки?
- Статистический критерий. Спросите модель, отличаются ли значимо токи через 30 мин и через 2 ч. Какой критерий она предложит, назовёт ли условия его применимости и выполнены ли они на десяти образцах с выбросом?
- Формулы вместо чисел. Попросите модель не считать статистики, а написать формулы для табличного редактора, которые их посчитают. Сравните два подхода по числу ошибок.
Автор курса
Виталий Пиков
- Архитектор информационной безопасности • РБПО • DevSecOps • AppSec
- Лектор и автор образовательных программ по ИБ и РБПО
Телефон: +7 (963) 782-92-78 · E-mail: vitaly@pikov.expert · Сайт: https://pikov.expert · Telegram: @UnderLineSecurity