Применение принципов микросервисной архитектуры и обработки больших данных для автоматизации анализа и прогнозирования показателей плодородия почв в сельскохозяйственных угодьях
DOI:
https://doi.org/10.25726/m4320-8014-9122-lКлючевые слова:
микросервисная архитектура, большие данные, плодородие почв, дистанционное зондирование, машинное обучениеАннотация
Исследование направлено на преодоление разрыва между потребностью в оперативном управлении плодородием и инерционными, трудоёмкими практиками традиционной агрохимической съёмки. Целью является разработка и апробация программно-аппаратного комплекса, объединяющего принципы микросервисной архитектуры и обработки больших данных для автоматизации анализа и прогнозирования показателей почв. Научная новизна состоит в масштабируемой, отказоустойчивой платформе с асинхронным обменом и эластичным масштабированием, обеспечивающей анализ гетерогенных источников в режиме, близком к реальному времени. Практическая значимость – поддержка точного земледелия, ускорение решений и снижение издержек на уровне крупных агропредприятий в сезоне посевной кампании. Методологическая основа включает декомпозицию на сервисы ingest-data, data-processing, ml-analysis, forecasting-engine и api-gateway в контейнерах с оркестрацией и брокером сообщений. Сформирован датасет 2015-2024 годов: 50 000 точек агрохимии (гумус, подвижные формы P и K, pH), мультиспектральные снимки Landsat-8 и Sentinel-2 с NDVI/EVI, SRTM, метеопараметры и агротехнологические операции. Применены градиентный бустинг и случайный лес для оценки текущих показателей, LSTM для динамики; валидация k-fold с метриками R², MAE, RMSE и тестирование производительности на пакете данных 1 ТБ. Результаты показали преимущество над монолитом: снижение среднего времени обработки на 35,15%, увеличение пропускной способности на 93,37% и уменьшение 95-го перцентиля задержки на 49.5%, при сопоставимом пиковом использовании ЦП. Точность моделей высока: для гумуса R²=0.917, MAE=0,12%; для P2O5 R²=0.862, MAE=11,4 мг/кг. Прогноз LSTM для K2O демонстрирует R²=0.881 (1 год), 0.795 (3 года) и 0.713 (5 лет) при p 0.001, обеспечивая кратко- и среднесрочную плановую ценность. Обсуждение подтверждает, что микросервисы устраняют бутылочные горлышки за счёт параллелизма, изоляции и гибкого масштабирования, а асинхронные паттерны стабилизируют отклик под нагрузкой. Интеграция дистанционного зондирования, рельефа и полевых данных делает возможным оперативные карты обеспеченности и предиктивное планирование. Экономическое моделирование для 10 000 га показывает сокращение затрат на анализ на 75%, экономию удобрений на 18,7%, рост урожайности на 6,4% и увеличение прибыли на 28,4%. Перспективы включают интеграцию прогнозов погоды, MLOps и прескриптивные рекомендации.Библиографические ссылки
Буклагин Д.С., Аронов Э.Л., Чавыкин Ю.И. Разработка и создание базы данных агротехнологий // Проблемы качества продукции в XXI веке. Методы и технические средства испытаний и сертификации технологий и техники: мат. Межд. науч.-прак. конф. М., 2003. С. 3-16.
Вернюк Ю.И., Анисимов К.Б., Бакулин Д.А., Зеленин С.Н., Клещенко М.М. Инновационные методы и технические средства дистанционного мониторинга земель для информационного обеспечения систем управления плодородием почв и продуктивностью посевов в современных агротехнологиях // Инновационные процессы в АПК: мат. IV Международной науч.-прак. конф. преп, мол. ученых, асп. и студ. М.: Российский университет дружбы народов. 2012. С. 13-18.
Гончаров В.Д., Маглыш Е.Г., Моисеев К.Г. Агрофизический мониторинг и построение базы экспериментальных данных физических параметров почв // Материалы координационного совещания и научной сессии Агрофизического института. Санкт Петербург, 2009. С. 143-147.
Драгавцева И.А., Луценко Е.В., Лопатина Л.М. База данных автоматизированной системы мониторинга, анализа и прогнозирования развития сельхозкультур (База данных «Прогноз Агро»). Свидетельство о регистрации программы для ЭВМ RU 2003620035. 20.02.2003.
Заплетин В.Я., Лунев А.Г., Лукин И.Д., Рязанов Н.А. Применение земельно оценочных данных для прогнозирования структур посевных площадей // Земельный кадастр и проблемы его информационного обеспечения: мат. науч.-прак. семинара. 1993. С. 24-27.
Лесных Е.А. Использование автоматизированных информационных технологий в агрономии // Аграрная наука сельскому хозяйству: мат. Всерос. науч.-прак. конф. 2009. С. 102-104.
Лисецкий Ф.Н., Пичура В.И. База данных «Оценка плодородия почв мелиоративных систем». Свидетельство о регистрации базы данных RU 2012620174. 10.02.2012.
Магафуров К.Б. Моделирование плодородия почвы на основе микропестроты // Эффективные приемы воспроизводства плодородия почв, совершенствование технологий возделывания, создание и внедрение новых сортов сельскохозяйственных культур: сб ст. 1995. С. 55-57.
Максименко В.П., Павлущенко В.А. О разработке общей базы данных энергоэквивалентов ресурсов и энергосодержания в продукции растениеводства и плодородию почв // Мелиорация и проблемы восстановления сельского хозяйства в России: мат. Межд. науч.-прак. конф. (Костяковские чтения). 2013. С. 190-193.
Мамина Г.А. Использование микробиологических и агрохимических показателей при моделировании почвенного плодородия // Повышение плодородия орошаемых почв при интенсивном использовании: сб. науч. тр. Волгоград, 1989. С. 59-68.
Рощина Ж.В. Автоматизированные системы обработки информации в землеустройстве // Проблемы землеустройства и кадастров: мат. науч.-прак. конф. студ. и мол. учен. «Современные тенденции развития земельного кадастра и землеустройства в ЮФО». Новочеркасск: Новочеркасская государственная мелиоративная академия, 2005. С. 107-110.
Семёнов В.А., Кульков О.В., Петрова М.В. Приборное обеспечение принятия агротехнологических решений почвенно агрофизической информацией // Достижения науки и техники АПК. 2004. № 1. С. 13-16.
Семенов В.А., Петрова М.В., Кульков О.В. Приборное обеспечение почвенно-агрофизической информацией систем точного земледелия // Методическое и экспериментальное обеспечение адаптивно ландшафтных систем земледелия. АФИ 75 лет. СПб., 2007. С. 46-59.
Фрид А.С. Принципы разработки системы справочных данных по плодородию почв // Бюллетень Почвенного института им. В.В. Докучаева. 1985. № 36. С. 6-8.
Чекмарев П.А., Лукин С.В. Использование геоинформационных систем при проведении мониторинга плодородия почв // Достижения науки и техники АПК. 2013. № 1. С. 3-5.