Исследователи разработали обработку уличных снимков для оценки пустующих домов

Авторы препринта, опубликованного 9 ноября на arXiv, представили конвейер обработки уличных фотографий для оценки пустующего жилья. Его проверили на 10 311 снимках 1 609 участков с отдельно стоящими домами в Южной Корее. Работа решает две практические проблемы: на фотографии может не быть полезных для оценки деталей, а вместо нужного здания модель может анализировать соседнее.

Сначала система отбирает пригодные изображения, адаптируя критерии к композиции кадра и административному району. При том же числе сохранённых снимков, что и у единого фильтра, такой подход оставил пригодное изображение ещё для 101 участка. Затем система определяет нужный дом по метаданным камеры и границам участка — без контуров зданий и дополнительного обучения. По данным авторов, привязка совпала с человеческой разметкой на 85,6% снимков против 79,8% у лучшего простого правила.

Фильтрация и привязка повысили AUROC — показатель способности классификатора различать пустующие и непустующие дома — с 0,684 до 0,719. Однако при указании другого дома в том же кадре результат всё ещё составлял 0,709. Анализ Grad-CAM, показывающий области изображения, на которые ориентируется модель, выявил, что она часто использовала участки вне нужного здания.

Поэтому авторы предлагают отдельно проверять пригодность фотографии, правильность выбора дома и визуальные признаки, на которых основана оценка. Сохранение сведений об использованных снимках и выбранных зданиях позволяет проверяющим разбирать каждый результат. Работа описывает исследовательский метод, а не запуск готового сервиса.