어항물을 수돗물로 채워줘도 문제 없을까요?

물고기 키운지 얼마 안된 초보입니다. 어항에서 냄새가 나는것 같아서 물을 한번 갈아주고 싶은데 수돗물을 그냥 받아서 넣어줘도 상관없을까요? 궁금합니다.