귀지 청소를 오히려 자주하면 안 좋다는데 왜 그런가요?

평소 샤워이후에 습기제거와 귀지제거를 위해 면봉을 자주 사용합니다. 그런데 예전에 귀를 자주 파면 안좋다는 얘기를 들어서 왜 그런지 궁금하네요.