첫 알바 근무날 만약 사장님이 근로계약서를 거절할때 어떻게 대처해야하나요?

안녕하세요. 저는 어제 첫 알바 면접을 보고 바로 합격을 했고, 내일부터 출근을 하기로 했는데 아직 근로계약서 얘기가 없으셔서 걱정입니다. 그래서 만약 내일 출근 했는데 근로계약서에 대한 얘기가 없고, 제가 먼저 근무전에 "혹시 근로 계약서를 쓰고 일 시작하는게 어떨까요?" 라고 얘기를 했음에도 사장님이 근로계약서를 나중에 쓰자고 말하거나, 거절의 표시를 했을 경우 제가 첫 근무날 근무를 아예 하지 않고 사장님께 "근로계약서 작성을 안 하고 시작하면 저는 일하는게 조금 힘들 것 같습니다" 라고 말하면서 일을 안하고 나와도 될까요? 이럴 경우 저에게 오는 불이익은 없겠죠? 혹시 대처법이 이것말고도 있다면 알려주시면 감사하겠습니다ㅠㅠ 제가 알바가 완전 처음이라 어렵네요.