밭농사를 짖고 있는 땅에 집을 지어도 되나요?

시골에 어머님께서 물려주신 땅이 있는데요.

지금은 다른사람에게 빌려줘서 밭농사를 짖고 있는데요.

혹시 차후에 지금 밭농사를 짖고있는 땅에 집을 지어도 되는건가요?