Методы глубокого обучения для анализа гиперспектральных изображений в сельском хозяйстве: обзор

Аннотация

За последние десятилетия гиперспектральная съёмка (HSI) приобрела особую значимость в разработке систем компьютерного зрения для решения задач дистанционного зондирования, особенно в сельском хозяйстве. Анализ HSI осложняется высокими объёмами избыточных спектральных данных, ограниченными тренировочными выборками и нелинейными зависимостями между пространственным положением и спектральными каналами. Данная работа посвящена изучению перспективных подходов глубокого обучения (Deep Learning, DL), таких как автоэнкодеры, свёрточные нейронные сети (Convolutional Neural Networks, CNN), рекуррентные нейронные сети (Recurrent Neural Networks, RNN), глубокие доверительные сети (Deep Belief Network, DBN) и генеративно-состязательные сети (Generative Adversarial Networks, GAN), применяемые в сельском хозяйстве. Результаты экспериментов на популярных наборах данных показывают высокую эффективность этих методов.


1. Введение

Сельское хозяйство сталкивается с необходимостью повышения эффективности, снижения затрат и минимизации экологического воздействия. Традиционные методы мониторинга культур трудоемки и малоэффективны. Гиперспектральная съемка (HSI) позволяет получать детальные данные о состоянии растений, почвы и водных ресурсов, что делает её незаменимым инструментом для точного земледелия.


HSI объединяет спектроскопию и визуализацию, формируя «куб данных», где каждый пиксель содержит спектральную сигнатуру материала. Это позволяет выявлять заболевания растений, оценивать содержание питательных веществ, прогнозировать урожайность и мониторить состояние почвы.


Однако обработка HSI требует продвинутых алгоритмов из-за:


·        Высокой размерности данных

·        Ограниченного количества размеченных образцов

·        Сложных спектрально-пространственных зависимостей


Глубокое обучение решает эти проблемы за счет автоматического извлечения признаков и работы с большими объемами данных.


2. Гиперспектральная съемка: основы

2.1. Принципы HSI

HSI позволяет одновременно получать пространственные и спектральные данные. Каждый пиксель изображения содержит непрерывный спектр отражения в широком диапазоне длин волн (например, 400–2500 нм). Это позволяет идентифицировать материалы по их уникальным спектральным сигнатурам.


2.2. Оборудование и этапы обработки·       


Система HSI включает: источник освещения, объектив, спектрограф и детектор (ПЗС или КМОП).


Этапы обработки:

1.     Получение изображения

2.     Предобработка (калибровка, коррекция, сегментация)

3.     Извлечение признаков

4.     Классификация/регрессия

Рисунок 1: Получение гиперспектрального изображения, куб данных и спектральное содержимое нескольких пикселей (каждый цвет на 2D-графике представляет содержимое одного пикселя).

3. Режимы съемки·       

Whisk-broom: построчное сканирование, высокое разрешение
Push-broom: линейное сканирование, эффективно для БПЛА
Staring: полное изображение за один кадр
Snapshot: мгновенная съемка всего поля зрения

Рисунок 2: Подходы к съемке

4. Наборы данных
5. Подходы, основанные на глубоком обучении, для классификации HSI

5.1. Сверточные нейронные сети (CNN)

·        1D-CNN: работают только со спектральными признаками
·        2D-CNN: извлекают пространственные паттерны
·        3D-CNN: комбинируют спектральные и пространственные данные
·        ResNet, DenseNet: решают проблему затухания градиентов

Пример: Гибридная расширенная остаточная сеть (DHDRN) достигла точности >99% на наборах Pavia University и Salinas.

5.2. Рекуррентные нейронные сети (RNN, LSTM, GRU)

·        Эффективны для обработки последовательностей (спектральных рядов)
·        SS-LSTM: комбинирует CNN и LSTM для спектрально-пространственного анализа

5.3. Автоэнкодеры (SAE, DAE)

·        Используются для уменьшения размерности и шумоподавления
·        CDSAE: компактный дискриминативный автоэнкодер с регуляризацией Фишера

5.4. Глубокие сети доверия (DBN)

·        Обучение без учителя с последующей тонкой настройкой
·        FHS-DBN: гибридная оптимизация с алгоритмами Firefly и Harmony Search

5.5. Генеративно-состязательные сети (GAN)

·        Генерация синтетических данных для обучения
·        Эффективны при малом количестве размеченных образцов
·        DCGAN, Capsule GAN, 3D-GAN

5.6. Активное обучение (AL)

·        Итеративный выбор наиболее информативных образцов
·        Стратегии: максимальная неопределенность, многоракурсность, взаимная информация

5.7. Трансферное обучение (TL)

·        Использование предобученных моделей на родственных задачах
·        Эффективно при ограниченных данных

6. Применение технологии HSI в сельском хозяйстве

6.1. Анализ почвы

Задача: Быстрая, неразрушающая оценка физико-химических свойств почвы для оптимизации внесения удобрений и мелиорации.

Как работает HSI: Спектральная сигнатура почвы меняется в зависимости от содержания органического вещества (SOM), влажности, минерального состава, текстуры и pH. HSI позволяет получать карты этих параметров в полевых масштабах.
 
6.2 Оценка урожайности сельскохозяйственных культур

Задача: Прогнозирование объема биомассы и конечной урожайности на ранних стадиях вегетации для логистики, страхования и управления ресурсами.

Как работает HSI: Показатели здоровья и продуктивности растений (содержание хлорофилла, азота в листьях, индекс листовой поверхности LAI, биомасса) имеют четкие спектральные корреляты. Индексы растительности (NDVI, NDRE), рассчитанные по узким гиперспектральным каналам, более чувствительны, чем мультиспектральные аналоги.

6.3 Классификация сельскохозяйственных культур

Задача: Автоматическое распознавание и картографирование типов культур, что важно для мониторинга севооборота, оценки площадей и борьбы с мошенничеством (например, при субсидировании).

Как работает HSI: Разные виды растений имеют уникальные спектральные сигнатуры из-за различий в биохимическом составе, структуре листьев и фенологической стадии. HSI позволяет различать не только виды (пшеница vs. кукуруза), но и сорта внутри вида, а также культуры на разных стадиях роста.

Преимущества перед RGB/мультиспектральной съемкой: Высокая точность в сложных случаях: разделение культур со схожей зеленой массой (например, различные виды злаков), выявление сорняков среди культур, обнаружение неоднородностей внутри одного поля.

6.4 Оценка загрязняющих веществ и питательных веществ в растениях

Задача: Неразрушающий контроль качества сельхозпродукции и мониторинг накопления токсинов в растениях.

Как работает HSI: Концентрация определенных химических соединений в тканях растения (нитраты, тяжелые металлы, афлатоксины) влияет на их спектральный отклик, особенно в диапазонах поглощения, связанных с конкретными молекулярными связями.

6.5 Мониторинг болезней растений и инвазивных видов

Задача: Раннее, доклиническое обнаружение биотических стрессов для своевременной и точечной обработки, минимизирующей использование пестицидов.

Как работает HSI: Патогены (грибки, бактерии, вирусы) и насекомые-вредители вызывают физиологические и биохимические изменения в растении еще до появления видимых симптомов (пожелтение, некроз). Эти изменения (снижение содержания хлорофилла, накопление вторичных метаболитов, изменение тургора) меняют спектральную сигнатуру, особенно в красной грани и ближнем ИК-диапазоне.

6.6 Загрязнение пластиком в агроэкосистемах

Задача: Обнаружение и мониторинг пластиковых отходов (мусор) и пластика, используемого в сельском хозяйстве (мульчирующая пленка, покрытия теплиц), для решения экологических проблем и управления ресурсами.

Как работает HSI: Пластик имеет характерные спектральные особенности в диапазоне SWIR (коротковолновый инфракрасный, 1000-2500 нм), связанные с колебаниями связей C-H, что позволяет отличать его от природных материалов (почва, растительность, вода). В видимом диапазоне используются спектральные индексы (Plastic Index, FDI).

7. ОБСУЖДЕНИЕ, ВЫВОДЫ И БУДУЩИЕ ИССЛЕДОВАНИЯ

7.1 Обсуждение: Сильные стороны и текущие барьеры

Преимущества связки HSI + Глубокое обучение:

·        Автоматизация и объективность: Полностью автоматизированный конвейер от снимка до карты принятия решений, исключающий субъективизм эксперта.
·        Неразрушающий и масштабируемый анализ: Возможность мониторить огромные площади и множество растений без отбора проб.
·        Выявление скрытых паттернов: Способность DL-моделей находить сложные, неочевидные для человека спектрально-пространственные корреляции.
·        Ранняя диагностика: Ключевое преимущество для превентивного управления болезнями и стрессами.

7.2 Заключение

Статья подводит итоги современного состояния технологий HSI и глубокого обучения в сельском хозяйстве, подчёркивая высокий потенциал этих методов для повышения эффективности и устойчивости аграрного сектора.
Симбиоз HSI и DL трансформирует сельскохозяйственные практики, делая их более устойчивыми, ресурсоэффективными и предсказуемыми.

Читать полную статью

22 декабря / 2025