창문틀이 먼지가 자주 쌓이는데 청소 깨끗하게 하는방법좀

항상보면 창문틀이 흑이랑 먼지 벌레가 많이 죽어있어

청소를 해야될듯 한데, 어떻게 청소하는게 좋을지 궁금합니다. 빗자루로 쓸어 버리면 될까요!?