Pasar al contenido principal

Resultados relacionados

Resultados totales (Incluyendo duplicados): 3
Encontrada(s) 1 página(s)

DIGITAL.CSIC. Repositorio Institucional del CSIC
Publicación Artículo científico (JournalArticle)

Spatio-temporal stability of intelligent modeling for weed detection in tomato fields

  • Gómez, Adrià
  • Moreno, Hugo
  • Valero, Constantino
  • Andújar, Dionisio
[Context] Site-specific Weed Management (SSWM) represents a shift towards precision and sustainability in agricultural weed control by applying treatments selectively. Leveraging machine learning (ML) and deep learning (DL), particularly convolutional neural networks (CNNs), enhances weed detection capabilities through automated image analysis. Challenges such as requiring extensive labeled datasets and spatio-temporal variability of weeds remain. Utilizing multi-year datasets provides an effective solution by reducing labor-intensive annotation efforts and improving model generalization across varying conditions., [Objective] This study aimed to develop and assess DL models (YOLOv8, YOLOv9, YOLOv10, RT-DETR) for accurate detection of five weed species (Cyperus rotundus L., Echinochloa crus-galli L., Setaria verticillata L., Portulaca oleracea L., Solanum nigrum L.) in tomato fields by integrating multi-year datasets through temporal, spatial, and spatio-temporal analyses., [Methods] The study was conducted in commercial tomato fields in Santa Amalia, Badajoz, Spain, across the 2021 and 2022 growing seasons. Images were systematically captured using a high-resolution Canon camera following an “M”-shaped trajectory. Experts annotated weed species manually, and images underwent augmentation and segmentation to enhance dataset robustness. The models were trained on distinct temporal (year-based), spatial (field-based), and spatio-temporal (combined) datasets, utilizing pre-trained weights and consistent hyperparameters. Performance was evaluated using Average Precision (AP) and Mean Average Precision (mAP)., [Results and conclusions] Applying DL models effectively detected weed species, highlighting the importance of comprehensive datasets for model performance. The temporal analysis, relying solely on previous-year data, achieved a mean average precision (mAP) of 0.7, demonstrating limited efficacy. Using same-year but different-field data, spatial analysis showed improved accuracy (mAP: 0.81–0.89). The spatio-temporal analysis combining datasets from multiple years provided the highest accuracy (mAP up to 0.91), validating the advantages of integrating diverse data across different periods., [Significance] Integrating multi-year datasets substantially enhances the precision and efficiency of DL-based weed detection models. This methodology minimizes the dependency on labor-intensive annotation processes, accelerates model deployment, and boosts dataset variability, thus fostering more robust and accurate predictive capabilities. This analysis ensures a comprehensive representation of environmental conditions, soil types, and weed emergence patterns, extending the method's applicability beyond the original sampled areas in tomato commercial fields. Moreover, the environmental and agricultural conditions of the sampled area resemble those found in other major tomato-producing areas worldwide, thus supporting the reproducibility of the experiments and the broader applicability of the study's findings., This research was funded by the grant PID2023-150108OB-C33 funded by the MICIU / AEI / 10.13039/501100011033 and FEDER, EU, and by the grant TED2021-130031B-I00 funded by MICIU/AEI/ 10.13039/501100011033, as appropriate, by the “European Union NextGenerationEU/PRTR., Peer reviewed
DIGITAL.CSIC. Repositorio Institucional del CSIC
Publicación Artículo científico (JournalArticle)

DeepFake Weeds: integración de redes neuronales y stable diffusion para la detección de malas hierbas en cultivos de tomate, DeepFake Weeds: Integration of neural networks and stable diffusion for weed detection in tomato crops

  • Moreno, Hugo
  • Gómez, Adrià
  • Ribeiro Seijas, Ángela
  • Andújar, Dionisio
[EN] Weeds negatively affect crop yield and quality by competing with the crop for resources. Detecting them in time allows us to optimize control through the precise application of herbicides and reduce their environmental impact. However, its detection and classification are challenging due to the great diversity of species and similarities with crops. Deep learning methods have allowed the development of convolutional neural networks (CNN) for the classification of weed species. However, CNNs require large and varied data sets for training. This study proposes an innovative methodology using CNN, YOLOv8l and RetinaNet classifiers augmented with Stable Diffusion data, implemented artificial images of weeds. Three data sets were configured for training CNNs (real, artificial and mixed) in commercial tomato crops infested by Solanum nigrum L., Portulaca oleracea L. and Setaria verticillata L. The results showed a high degree of agreement with artificial images, reaching a maximum mean Average Precision (mAP) of 0.93 in both networks for the mixed data set. Stable Diffusion made it possible to generate large, high-quality data sets from a limited set of images, reducing the need to obtain a large number of images in the field and their subsequent manual labeling. Furthermore, the method can be adapted to other crops and weed species, thus contributing to the advancement of automated weed management systems., [ES] Las malas hierbas afectan negativamente el rendimiento y calidad de las cosechas al competir con el cultivo por los recursos. Detectarlas a tiempo permite optimizar el control mediante la aplicación precisa de herbicidas y reducir su impacto ambiental. Sin embargo, su detección y clasificación es un desafío debido a la gran diversidad de especies y similitudes con los cultivos. Los métodos tradicionales de aprendizaje profundo (Deep Learning) han permitido el desarrollo de redes neuronales convolucionales (CNN) para la clasificación de especies de mala hierba. Sin embargo, las CNN requieren amplios y variados conjuntos de datos para su entrenamiento. Este estudio propone una metodología innovadora utilizando clasificadores de CNN, YOLOv8l y RetinaNet aumentados con datos de Stable Diffusion (SD), implementado imágenes de malas hierbas generadas artificialmente. Para ello, se configuraron tres conjuntos de datos para el entrenamiento de las CNNs (real, artificial y mixto) en cultivos de tomate comercial infestados por Solanum nigrum L., Portulaca oleracea L. y Setaria verticillata L. Los resultados mostraron un alto grado de acuerdo con imágenes artificiales, alcanzando un mean Average Precision (mAP) máximo de 0,93 en ambas redes para el conjunto de datos mixto. SD permitió generar grandes conjuntos de datos de alta calidad a partir de un conjunto limitado de imágenes, reduciendo la necesidad de obtener un gran número de imágenes en campo y su posterior etiquetado manual. Además, el método puede adaptarse a otros cultivos y especies de mala hierba, contribuyendo así al avance de los sistemas automatizados de gestión de malas hierbas., Esta investigación ha sido financiada por la AEI (Ministerio de Ciencia e Innovación, España), subvención número TED2021-130031B-I00, según el caso, por “FEDER Una manera de hacer Europa”, por la “Unión Europea” o por la “Unión Europea NextGenerationEU/PRTR” y PID2020- 113229RBC43/AEI/10.13039/501100011033. A Juan Ramón Andújar por facilitar los campos comerciales de tomate en Badajoz (Extremadura)., Peer reviewed
DIGITAL.CSIC. Repositorio Institucional del CSIC
Publicación Artículo científico (JournalArticle)

Desarrollo y validación de un sistema de ajuste de la intensidad de tratamiento mecánico de malas hierbas a través del análisis automático de imágenes, Development and validation of a system for adjusting the intensity of mechanical weed treatment using automatic image analysis

  • Spaeth, Michael
  • Moreno, Hugo
  • Gerhards, Roland
  • Rueda-Ayala, Víctor
  • Andújar, Juan Ramón
  • Morillo-Barragan, Juan
  • Gómez, Adrià
  • Andújar, Dionisio
[EN] A system for automatically adjusting the angle of incidence of the tines of a harrow by processing nearby images allows the intensity of the treatment to be adapted in real time. In this study, precision agriculture technologies were implemented in a commercial implement to increase the selectivity of a mechanical treatment of weeds in cereal. The objective was to develop and test an algorithm to automatically adjust the force exerted by the tines against the ground, varying their angle of incidence, and the number of passes. Images were acquired on a set of RGB cameras and processed in real time to calculate the percentage of vegetation cover. The ground drag force opposite the direction of travel was measured with a load cell connected to a rigid spike mounted in front of the stand. The optimal intensity levels were obtained in previously carried out experiments, based on the effectiveness of weed control and increase in crop yield. The processing of the images generated a set of data that was stored and subsequently analyzed through an FMIS (Farm Management Information System). This same input was used to generate control signals, based on a decision-making system, encrypted through the ISOBUS protocol to adjust the angle of incidence of the tines on the ground., [ES] El desarrollo de un sistema de ajuste automático del ángulo de incidencia de las púas de una rastra mediante el procesamiento de imágenes próximas permite adaptar la intensidad del tratamiento de malas hierbas en tiempo real. En este estudio se implementaron un conjunto de sensores y actuadores para lograr un sistema de tratamiento localizado, en base un apero comercial, para aumentar la selectividad de un tratamiento mecánico de malas hierbas en cereal. El objetivo de este trabajo fue desarrollar y probar un algoritmo para ajustar automáticamente la fuerza ejercida por las púas contra el suelo, variando su ángulo de incidencia en base a la densidad de mala hierba. Sobre un conjunto de cámaras RGB, se adquirían imágenes que se procesaban en tiempo real para el cálculo del porcentaje de cobertura vegetal. La fuerza de arrastre del suelo opuesta a la dirección de desplazamiento se midió con una célula de carga conectada a una púa rígida montada delante de la rastra. Los niveles óptimos de intensidad se obtuvieron en experimentos realizados previamente, basándose en la eficacia del control de las malas hierbas y el aumento del rendimiento del cultivo. El procesamiento de las imágenes produce un conjunto de datos que sirve como entrada para la generación de las señales de control, en base a un sistema de toma de decisiones, cifradas a través del protocolo ISOBUS para el ajuste del ángulo de incidencia de las púas sobre el terreno. A su vez estos datos permanecen almacenados a través de un FMIS (Farm Management Information System)., Esta investigación ha sido financiada por la AEI (Ministerio de Ciencia e Innovación, España), número TED2021-130031B-I00, por “ ERDF A way of making Europe “, por la “Unión Europea” o por la “Unión Europea NextGenerationEU/PRTR” y PID2020-113229RBC43/AEI/10.13039/501100011033., Peer reviewed