ИИ в предотвращении пожаров: офлайн-протокол приёмки детектора раннего дыма и огня
Как принять детектор раннего дыма и огня на своих кадрах: страты сцен, recall, медианная задержка, ложные тревоги на камеру-час и выбор порога.

Чтобы принять один детектор раннего дыма или огня, не нужен общий обзор искусственного интеллекта в пожарной безопасности. Нужен воспроизводимый офлайн-тест на ваших кадрах: набор страт, правила разметки момента очага, recall по стратам, медианная задержка в секундах и число ложных тревог на камеру-час. Итог — рабочая точка порога, зафиксированная в отчёте вместе с версией модели.
Ниже — протокол, который можно провести без доступа к облаку и без изменения самой системы. Он не заменяет нормы пожарной сигнализации и не описывает экологический мониторинг: речь только о приёмке детектора по видео. Общие принципы оценки видеоаналитики — страты, разметка, метрики — применимы и здесь, но для ранней стадии пожара их нужно дополнить.
Зачем отдельный протокол, а не «посмотрели демо»
Демонстрация на чужих эффектных кадрах показывает возможности модели, но не отвечает на вопрос, который важен эксплуатации: сколько раз за смену оператор будет отвлекаться и как быстро система заметит слабый дым в ваших условиях.
Пожарная специфика в трёх вещах:
- объект интереса появляется как слабый, малоконтрастный признак и растёт во времени, поэтому важна не только детекция кадра, но и задержка до первого верного срабатывания;
- трудные негативы — пар, пыль, туман, выхлоп, контровой свет — визуально близки к дыму;
- цена пропуска и цена ложной тревоги распределены неравномерно, и порог выбирается под реальную нагрузку оператора, а не под красивую общую метрику.
Границы протокола
Протокол проверяет один детектор на одном наборе камер и сцен. Он не подтверждает соответствие нормам пожарной сигнализации, не заменяет проектную документацию и не доказывает работоспособность системы в целом. Он также не оценивает качество тушения, эвакуации или оповещения.
Если детектор работает на нескольких типах камер (видимый свет и ИК), тестируйте их как разные конфигурации: смешивание в одной метрике скрывает провал на одном из каналов.
Страты тестовых сцен
Страта — это группа кадров с общим условием съёмки или типом объекта. Для раннего обнаружения полезен минимум такой набор:
| Страта | Что проверяет | Типичная сложность |
|---|---|---|
| Ранний дым | Способность заметить слабый признак до явного пламени | Малый размер, низкий контраст |
| Дым без пламени | Работу по основному сценарию тления | Медленное развитие, похожесть на туман |
| Контровой свет | Устойчивость к засветке и бликам | Потеря текстуры, ореолы |
| Ночь / ИК | Поведение на другом канале изображения | Иная яркость и шум |
| Пар и пыль | Трудные негативы | Ложные срабатывания |
Добавьте страту «чистый фон» — сцены без дыма и без трудных негативов. Она нужна, чтобы отделить базовый уровень ложных тревог от эффекта паров и пыли.
Публичные наборы для раннего обнаружения дыма существуют и включают как изображения, так и видео: например, в описании PyroNear 2024 указано около 150 тысяч ручных аннотаций на 50 тысячах изображений, охватывающих 400 пожаров, а кросс-датасетные эксперименты с лёгкой моделью детекции дали F1 порядка 60% (см. препринт PyroNear 2024). Эти цифры полезны как ориентир сложности задачи, но не заменяют ваш набор: чужие камеры, ракурсы и климат не равны вашим.
Разметка момента очага и окна обнаружения
Ключевое решение приёмки — когда считать, что модель «увидела» пожар. Без правила разметки метрики несравнимы между прогонами.
- Момент очага. Для каждого тестового эпизода разметчик фиксирует время первого кадра, где признак (дым или огонь) различим при просмотре без подсказок модели. Это опорная точка, а не время, когда признак стал очевиден.
- Окно обнаружения. Задаётся допустимая задержка, внутри которой срабатывание считается верным. Если тревога пришла позже окна, это уже пропуск.
- Срабатывание. Фиксируется первое срабатывание модели после момента очага, попавшее в окно. Повторные тревоги в том же эпизоде не считаются новыми обнаружениями.
- Независимая проверка. Разметку момента очага делает человек, не видевший выхода модели; иначе возникает подгонка.
Окно обнаружения выбирайте из операционных соображений: сколько времени есть у дежурного, чтобы проверить тревогу и передать информацию. Это решение эксплуатации, а не свойство модели.
Метрики: recall по стратам, медианная задержка, ложные тревоги
Recall по стратам
Считайте долю эпизодов, где модель сработала внутри окна, отдельно для каждой страты. Общий recall по всем кадрам может быть высоким за счёт простых сцен и скрывать провал на паре, пыли или ночью. Показывайте таблицу «страта — число эпизодов — recall».
Медианная задержка
Для верных обнаружений считайте время от момента очага до первого срабатывания. Медиана устойчивее среднего, если в выборке есть выбросы. Указывайте также число эпизодов, по которым она посчитана: медиана по трём случаям почти ничего не говорит.
Ложные тревоги на камеру-час
Разделите число ложных срабатываний на суммарное время наблюдения в часах по всем камерам теста. Метрика нормирует нагрузку и позволяет сравнивать конфигурации с разной длительностью записи. Считайте её отдельно для страты «чистый фон» и для страты «пар и пыль».
Практическое замечание: если ложные тревоги считать по кадрам, а не по событиям, одна затянувшаяся помеха даст десятки «тревог». Считайте события, а не кадры.
Пересчёт ложных тревог в нагрузку оператора
Метрика на камеру-час плохо воспринимается дежурной сменой. Переведите её в число проверок за смену:
проверок за смену ≈ ложные тревоги на камеру-час × число камер × длительность смены в часах
Учебный условный расчёт: 0,5 ложной тревоги на камеру-час, 12 камер, смена 8 часов дают около 48 проверок за смену, то есть примерно одну каждые 10 минут. Числа вымышленные и приведены только для иллюстрации формулы, а не как результат исследования. Такая нагрузка мешает оператору заниматься другими задачами и повышает риск привыкания к тревогам.
Сравните это число с реальной пропускной способностью дежурного: сколько проверок он успевает осмысленно обработать. Если расчёт превышает возможности смены, порог нужно менять, а не «терпеть».
Выбор рабочей точки порога
Порог — это компромисс между задержкой обнаружения и нагрузкой оператора. Процедура простая:
- Постройте для нескольких значений порога таблицу: recall по каждой страте, медианная задержка, ложные тревоги на камеру-час.
- Отбросьте значения, при которых recall на критичной для вас страте падает ниже приемлемого.
- Из оставшихся выберите то, при котором расчётная нагрузка за смену укладывается в возможности дежурного.
- Зафиксируйте выбранный порог, версию модели и дату прогона в отчёте.
Не выбирайте порог по одному числу точности на смешанном наборе: он почти всегда окажется слишком мягким для трудных негативов или слишком жёстким для раннего дыма.
Типичная ошибка приёмки
Частая ошибка — принять модель по общей точности на «обычных» кадрах, не проверив отдельно пар, пыль и ночной канал. На общем наборе метрика выглядит прилично, а в эксплуатации оператор получает поток ложных тревог именно в тех условиях, которые не попали в тест. Вторая ошибка — измерять задержку от момента, когда дым стал очевиден, а не от первого различимого признака: тогда система выглядит быстрее, чем есть.
Полезно помнить, что трудность различения дыма и похожих явлений — известная проблема: в работе про детекцию дымящих автомобилей авторы отмечают сложность отличить дым от теней и влажных участков дороги и высокую долю ложных срабатываний по кадрам (см. препринт о детекции дымящих автомобилей). Это другой домен, но вывод о необходимости отдельно тестировать трудные негативы переносится и на раннее обнаружение пожара.
Чек-лист отчёта приёмки
- Перечень камер и конфигураций (видимый свет / ИК), период записи.
- Описание страт и число эпизодов в каждой.
- Правило разметки момента очага и размер окна обнаружения.
- Таблица recall по стратам.
- Медианная задержка с указанием числа эпизодов.
- Ложные тревоги на камеру-час по стратам «чистый фон» и «пар и пыль».
- Расчёт нагрузки оператора за смену.
- Выбранный порог, версия модели, дата прогона.
- Явно перечисленные ограничения: чего протокол не проверял.
Такой отчёт даёт эксплуатации основу для решения: подходит ли детектор для раннего выявления пожаров с ИИ в ваших условиях и с какой нагрузкой на смену. Если данных по какой-то страте мало, честнее указать это в ограничениях, чем подставлять общую метрику.


