'천방지축마골피'라는 성은 왜 상놈 성씨라고 했을까요?

우스게소리로 '천방지축마골피'라는 성은 상놈 성씨라고 합니다. 특별히 특정해서 저 성들이 상놈 성씨라고 한 이유가 있을까요?