입주 전 계약파기 했는데 보증금을 안돌려줍니다.

입주를 하기로 해서 계약금과 보증금을 납부했는데 집에 사정이 생겨서 입주가 어렵게 되어 계약을 파기하게 되었습니다.

당연히 임차 계약서도 작성하지 않았고, 그냥 계약금만 날린다 생각하고 있었는데 집주인이 다음 세입자 구하기 전에는 보증금을 안준다고 합니다 ㅋㅋㅋ 이거 불법으로 알고 있는데 어떻게 받아야 하는지 알려주세요!!!