수건 빨때 섬유유연제 넣어도 되나요?

어떤 분들은 수건을 빨 때는 섬유유연제를 넣지 않고 세탁을 하신다던데요. 섬유유연제를 넣지 않으면 수건에서 냄새가 날 때가 있어서 넣는 중인데 넣으면 안되나요?