28460

Сортировка фотографий для поиска пропавших людей

Август, 2019 год.

Технология сортировки фотографий с беспилотников «Beeline AI – Поиск людей» для обнаружения пропавших волонтерами поисково-спасательного отряда «Лиза Алерт».

Решение позволяет сокращать время на анализ, отсортировать неинформативные снимки и сконцентрировать внимание поисковиков на тех, где потенциально могут быть признаки присутствия потерявшегося – сам человек, элементы его одежды или экипировки.  

alt

Какую проблему решали

Отряд «Лиза Алерт» ввёл в поиски пропавших людей беспилотные летательные аппараты. За один полёт дрон делает 2 500 снимков. Часто полетов требуется несколько. На обработку фотографий только одного полета 30 человек тратят 5-7 часов.
Требовалось сократить время на анализ снимков, увеличить скорость принятия решений и эффективность спасательной команды.
Решение проблемы
«Лиза Алерт» использует технологию «Beeline AI - Поиск людей» для сортировки неинформативных фотографий, на которых нет человека или признаков его присутствия, от потенциально важных снимков.
Нейронная сеть обнаруживает людей и косвенные признаки их присутствия в лесу, болотах, полях, городской местности, независимо от периода года, времени суток и положения тела. Система находит объекты с высоты 30-100 метров с точностью до 98%. Штаб поисковиков получает емкую выборку и принимает оперативные решения о поиске.
Применяемые технологии

AI-технология распознавания объектов на фото местности «Beeline AI - Поиск людей» на базе сверточных нейронных сетей.

Датасет для обучения нейросети формировался из:

  • 3 120 фото с реальных поисков;
  • 148 постановочных снимков тел;
  • 608 фото с людьми;
  • 400 снимков хорошего качества с Semantic Drone Dataset.

Планируется расширение датасета минимум 10 000 размеченными снимками с реальных поисков.

Архитектуры нейросети: Yolov3, Yolov3-Tiny, Yolov4. Формат модели ONNX. Модель обучается, затем веса переносятся на keras, оттуда в ONNX.

Решение представлено в двух форматах: онлайн-сервис с возможностью передавать данные в облачное хранилище BeeCloud и оффлайн-решение на компьютере поисковой группы на месте поисков.

Бизнес-процесс

До проекта:

  • На онлайн-ресурсе watcher.lizaalert.ru волонтёры просматривали снимки полей, лесов, озер и болот с дронов.
  • На проверку 2 500 фотографий с одного дрона группа из 30 человек тратила 5-7 часов. Волонтеры обрабатывают снимки нескольких пролетов беспилотника.

После проекта:

  • Технология «Beeline AI - Поиск людей» анализирует 1 снимок за 2-3 секунды. Время обработки контента сократилось до 1-2,5 часов.
  • Сортировку снимков контролирует один оператор дрона. Остальная команда фокусируется на полученной выборке фото с признаками присутствия человека.

Результаты

Команда ПАО «ВымпелКом»

Артур Боженов
Ведущий менеджер по разработке цифровых продуктов ПАО «Вымпелком»
Алексей Железкин
Руководитель портфеля по разработке инновационных продуктов ПАО «Вымпелком»
Максим Кузнецов
Старший эксперт по аналитике ПАО «Вымпелком»
Артем Мусинов
Директор по рекламному бизнесу и инновациям ПАО «Вымпелком»
Дмитрий Русов
Начальник отдела управления инновационными продуктами ПАО «Вымпелком»
Евгения Чистова
Руководитель направления устойчивого развития ПАО «Вымпелком»
Татьяна Шиловская
Старший менеджер по стратегическим коммуникациям ПАО «Вымпелком»

Команда «Лиза Алерт»

Евгений Герасимов
Руководитель направления беспилотной авиации ПСО «Лиза Алерт»
Ксения Кнорре
Руководитель группы по работе со СМИ «Лиза Алерт»
Григорий Сергеев
председатель ПСО «Лиза Алерт»