백제의 유민들이 일본으로 가서 지도층이 되었다고 하는데 사실일까요?

백제는 신라와 당나라의 협공을 받고 멸망하게 되는데요. 이때 백제를 돕기위해 왜 수군이 당군과 함께 싸우기도 합니다. 백제 유민들이 일본의 지배층이 되었다는 것이 사실일까요??