베란다 창틀은 어떻게 청소해야 하나요?

베란다에 있는 창틀에 먼지가 가득 쌓여서 굳어 있는데 어떻게 청소를 해야 할까요? 물 휴지로 닦아내는데도 다 닦이지가 않아서 그대로 있는데 청소하는 방법 있을까요?