통화나 대화내용 녹음시 동의를 받아야하나요?

상대방과의 통화를 하거나 직접 만나 대화 내용을 녹음할 때는 미리 동의를 받아야하는건지 궁금합니다. 상대방 모르게 녹음을 하면 법적으로 처벌이 가능한가요?