창문틀에 먼지를 효과적으로 청소하는 법이 있을까요?

겨울철이라 창문사이로 냉기가 많이 들어와서 청소를 하고 문틈에 막음처리를 하려고 하는데요 효과적으로 청소 할수 있는 방법을 알고 싶어요