창틀에 묵은 때 어떻게 청소 하나요?

가구뒤에 창틀이 있는데 너무 오랜 기간 청소를 하지 않아서 먼지도 많고 냄새도 나는든 한데요. 청소기로누 먼지만 제거 될거, 같고 묵은 때는 어떻게 닦아야 할까요?