층간소음시 윗층에 찾아가서 올라가면 안되나요?

층간 소음 때문에 윗층한테 한마디 하고싶은데 처음엔 경비실에 연락해서 자제 해달라고 부탁드렸습니다 그럼에도 불구하고 소음이 계속 지속이되서 윗층으로 올라간다고해서 문제될껀없나요??