주인이 있는 땅에 불법 농작물 재배하는데?

주인이 있는 사유지에 아무행위를 하지 않는다고 불법으로 농작물을 심어 기르더라구요? 사유지 주인 맘대로 농작물을 없애도 되는지 궁금합니다?