영구결번되면 영원히 그번호 사용 못하나요?

운동선수들 중 팀에서 성적이 매우 좋고 오랫동안 생활을 하면 은퇴할 때 연영구 결번을 주던데 그런 선수들이 계속 쌓이게 되면 그 번호 들은 계속 못 쓰게 되나요