Work

Dynamics of wheat organs by close-range multimodal machine vision

Year: 2022
Type: dissertation
Abstract: High-throughput plant phenotyping has a key role to play in crop improvement and crop adaptation to climate change.While it works routinely in greenhouses or controlled facilities, it is less advanced in the field.Instead of bringing potted-plants to the sensors, the sensors must be carried above the crop, dealing with the wind and the changing sunlight for image capture.It constraints the sensor types, the scanning possibilities and the choice of the view point.The measured signal comes from a whole cover instead of individuals.That signal is influenced by the background and does not provide traits separately for the organs (leaves, stems, ears).This research aimed to develop and evaluate imaging methods to characterise the wheat morphology and physiology at the organ scale, and study their dynamics in the field.Nadir images were acquired in six field trials by two RGB cameras, a multispectral camera array and a thermal camera.The height of the wheat organs was computed by stereo vision from the RGB images.Using deep learning, the ears were counted with a F1 score of 0.93 and segmented with a F1 score of 0.86, then the plant height was used to compute the image footprint at ear height and measure the ear density.Regarding the multispectral images, the data from an incident light sensor was used to convert digital values to reflectance factor.To fuse the information from the multiple cameras, the RGB, thermal and multispectral images were registered using a two-steps approach: a global transformation based on the relative position of the sensors followed by a local transformation based on the mutual image content.The registration error was 2 mm.In the end, the image fusion provided the dynamics of reflectance factors, vegetation indices and 3D traits at the organ scale, as well as the ratios of organs, green surface and foliar damage in the images.Those traits were exploited to derive nitrogen, water or disease stress indices.PLS regressions estimated leaf area index, above-ground dry matter, above-ground nitrogen concentration, above-ground nitrogen content and nitrogen nutrition index respectively with external validation RMSE of 0.95 m²/m², 2.19 t/ha, 0.57 %N, 32.14 kgN/ha and 0.13.Grain yield was estimated with a cross-validation RMSE of 0.32 t/ha.Je remercie avant tout Alexis Carlier, mon binôme pour cette recherche, sans qui ce doctorat aurait été nettement moins riche et amusant.À l'heure où la thèse est perçue comme une expérience solitaire, où les abandons ne se comptent plus, il y a des leçons à tirer d'une tel fonctionnement en équipe.Mes plus grands remerciements vont également à mes promoteurs, Benoît Mercatoris pour m'avoir accueilli, formé et encadré au quotidien, et Benjamin Dumont qui m'a transmis sa fascination pour le froment, pour ces réunions où fusent les idées.Ma dette s'étend aux membres du comité de thèse, Peter Lootens et Vincent Leemans, ainsi qu'aux spécialistes ayant accepté de faire partie de mon jury et consacrer une partie de leur temps pour améliorer ce travail : Antoine Fournier et Philippe Lejeune.Toute ma gratitude au F.R.S-FNRS, à Gembloux Agro-Bio Tech et au service public de Wallonie pour m'avoir donné les moyens et la liberté de poursuivre cette recherche.La phéno-mobile ne se serait jamais déplacée sans le support de Jesse Jap, Julien Kirstein et Rudy Schartz, il aurait fallu recourir une fois de plus aux muscles de Romain Bebronne, Nathan Maréchal et Michael Bonjour.Il faut aussi admettre que le froment ne pousse pas (tout à fait) tout seul, et en louer les équipes des ASBL ferme expérimentale et CePiCOP.À cela, s'ajoute la frénésie de Françoise Thys face aux prélèvements de référence et le travail de l'ombre d'Elias Ennadifi derrière l'intelligence de la machine pour détecter les épis.Une mention particulière pour Gauthier Lepage, Jérôme Heens et Tanguy Pérée, dont les travaux de fin d'étude se sont pleinement inscrits dans cette recherche, et à Arnaud Bouvry pour m'avoir guidé quand j'en étais à mon tour à cette étape.Je remercie aussi tous les étudiants qui ont contribué via les projets Phenobench, PhenoSEEd, Multicam I et Multicam II, ainsi qu'Amandine Collin et Abdelkabir Masrour pour leur aide lors de leur stage.Sans oublier Damien Vincke, François Godechal, Rémy Blanchard et Marie-Astrid Bouchard pour ces bons moments d'échange aux champs.Je remercie l'ensemble des personnes, chacune géniale à sa façon, avec qui j'ai pu partager le toit (percé) du bâtiment de génie rural, les tartes, les parties de ping-pong et la conquête du fac Trophy.Cette liste inclut
Language: English
Subfield: Plant Science
Open Access status: green
OpenAlex ID: W7065609733
Cites: 268
Cited by: 3
Related to: 10