теме почти две недели, а вместо того, что бы уже в коде чего попробовать сделать, чтение немного по отвлечённым темам (slam,...) и хз что ещё. что мешало или ещё мешает, пока хоть какая-то зелень есть, наделать фотографий и видео, которые уже можно хоть немного попробовать обрабатывать? opencv и определять где грядка, где пространство между ними (дорожка или ещё что). кроме определения грядок позже ещё чего сделать можно будет. по определению сорняков информации для начала немного найти можно, а вот с иходными данными (датасеты или хотя бы просто видео или пачка исходных фото) могут быть трудности.

зима же очень часто наступает неожидано. упустить момент и позже придётся искать видео/фото с максимально похожими грядками (+в достаточном качестве, с желаемой высоты, ракурса,...). или вообще временно придётся ограничиться видео на другие темы (движение по автомобильным дорогам,...) или вникать в бибоботов и зрение, используя паркетного малыша, катающегося по квартире.