회사에 부장이란 사람이 너무 싫은데 어떻게 하나요?

회사에 팀장으로 있는 부장이란 사람 때문에 일도 두번하게 되고 여러사람 피곤하게 만드는 스타일인데요. 일 많을때는 아무 말 안하다가 일 없을때 슬금 슬금 와서는 팀원들이 싫어할만한 말들을 뱉고 갑니다. 구매쪽에 있는데 재고파악 하기 싫어서 현장에서 바쁜 팀원들 시키고 안 맞으면 또 남탓하기 바쁜데 이걸 4년동안 버텼지만 더 이상 못 버틸거 같아요 회사는 좋은데 한 사람 때문에 회사를 나가긴 싫어요. 절이 싫으면 중이 떠나라는 말처럼 그렇게 해야 되는걸까요?