이런 경우에 가계약금 배액상환 못받나요?

집주인 개인사정으로 대리인이 와서 계약한다고 했는데 서류 지참을 안하겠대요 전 그렇게 계약하고 싶지 않아서 거절했고 가계약금을 돌려받기로 했습니다. 이럴경우 제가 합의한걸로 돼서 배액상환을 못받게 되는건가요?