수돗물을 끓이지 않고 그냥 마셔도 괜찮나요?

요즘은 생수나 정수기 물을 많이 이용하는데 점점 물값이 오르는 느낌이네요. 저렴하게 이용 가능한 수돗물은 끓이지 않고 그냥 마셔도 괜찮나요?