담장 아래로 떨어진 감 주었는데 문제 있는건가요?

지나던 길에 담장아래 감이 떨어져 있어서 그걸 주었습니다

근데 갑자기 집 주인이 나오더니 나무에 달려있는걸 쳐서 떨어트린걸 봤다며 감 값을 내라고 합니다

어이가 없어서 무슨소리를 하는거냐고 서로 실랑이가 있었는데요..

고소까지 한다네요??

이럴경우 어떻게 대처해야하는건가요?

문제가 있는건가요?