세탁 시 섬유유연제 꼭 써야할까요?

저는 향이 너무 싫어서 세탁세제만 사용합니다.

섬유유연제로 헹구면 그 냄새가 머리가 아파요.

반드시 써야할 이유는 모르겠어서

안쓰는데, 조금씩이라도 쓰는 게 좋을까요?