Masz umowę użyczenia na czas nieoznaczony. Taką umowę można wypowiedzieć na warunkach opisanych w art. 715
kc:
"Jeżeli umowa użyczenia została zawarta na czas nieoznaczony, użyczenie kończy się, gdy biorący uczynił z rzeczy użytek odpowiadający umowie albo gdy upłynął czas, w którym mógł ten użytek uczynić"
Użytek odpowiadający umowie to uprawa pola zgodna z zasadami dobrej gospodarki rolnej, która raczej nie pozwala na zbieranie żyta w maju

Masz prawo zebrać zasiany przez siebie plon we właściwym czasie, masz też oczywiście prawo do dopłat.
Policją się nie przejmuj, nawet sam możesz ją wezwać jeśli ci ludzie będą robili jakieś trudności z dostępem do pola albo jeśli będą chcieli zniszczyć twoje uprawy.