3개월 미만 일용직 근로자의 경우 연말정산을 해야하나요?

3개월 계약직으로 관공서에서 근로하였는데 연말정산을 해야하는지 궁금합니다. 급여 수령 시 원천세 공제를 하지 않았는데 만약 연말정산을 안했을 경우 불이익이 있나요?