Satellite information fusion with low-altitude unmanned aerial vehicle flights for estimating weed coverage

Abstract

The detection, geolocation, and classification of weeds in agricultural fields is a problem of interest associated with Precision Agriculture (PA). The main contribution of this work is to describe a workflow (feasible to automate) based on open-source software tools and open information to: 1) measure the spatiotemporal evolution of weed patches through satellite images, and 2) register high-resolution images (taken at low altitude) on top of the satellite image to identify the weeds that compose the detected patches. To merge the satellite and low-altitude information, the following problems must be solved: 1) correct distortions in the acquired images; 2) develop an image formation model that allows registering the low-altitude image on top of the satellite image, and 3) analyze green indices to measure patch coverage in both multiespectral satellite images and RGB images obtained from a camera mounted on an unmanned aerial vehicle. Finally, the feasibility of merging information is demonstrated through an analysis of the correlation in the coverage measures obtained from satellite and low-altitude images.

La deteccion, geolocalizacion y clasificacion de malezas en campos agricolas es un problema de interes asociado a la Agricultura de Precision (AP). El aporte principal de este trabajo es describir un flujo de trabajo (factible de automatizar) basado en herramientas de software libre e informacion abierta para: 1) medir la evolucion espaciotemporal de los parches de malezas a traves de imagenes satelitales y; 2) registrar las imagenes de alta resolucion (tomadas a baja altura) sobre la imagen satelital, para identificar las malezas que componen los parches detectados. Para fusionar la informacion satelital y de baja altura, se deben resolver los siguientes problemas: 1) corregir las distorsiones en las imagenes adquiridas; 2) desarrollar un modelo de formacion de imagenes que permita registrar la imagen a baja altura sobre la imagen satelital; 3) analizar los indices de verde para medir la cobertura de los parches, tanto en las imagenes satelitales multiespectrales, como en las imagenes RGB obtenidas desde una camara montada en un vehıculo aereo no tripulado. Finalmente, se muestra la factibilidad de realizar la fusion de informacion a partir de un analisis de la correlacion en las medidas de cobertura obtenidas de las imagenes satelitales y de las de baja altura.