크롤링시 해외, 국내 서버위치에 따라 응답시간에 차이가 있을까요?

Question

현재 업비트 프로젝트 공지사항을 heroku 웹 호스팅 서버에서 긁어 오고 있습니다.

https://project-team.upbit.com/api/v1/disclosure?region=kr&per_page=5

궁금한점은 해당 URL 의 서버가 어디에 있는지는 모르지만 만약 국내에 있을 경우

국내 호스팅업체인 cafe24 , 해외 호스팅 업체 heroku 에서 동시에 요청했다고 가정했을 경우

상황 마다 다르겠지만 새로운 응답 값을 가져오는데 시간차이가 있을까요???

0.1초라도 빠르게 작업해야하기 때문에그렇습니다.

Answer 1

궁금한점은 해당 URL 의 서버가 어디에 있는지는 모르지만 만약 국내에 있을 경우

국내 호스팅업체인 cafe24 , 해외 호스팅 업체 heroku 에서 동시에 요청했다고 가정했을 경우

상황 마다 다르겠지만 새로운 응답 값을 가져오는데 시간차이가 있을까요???

===> 게임서버 생각하시면 이해가 빠르실듯 합니다

국내서버는 국내서버에서 받는게 제일 빠릅니다

Answer 2

네트워크에 따라서 다르겠지만 업비트 같은 곳의 경우 AWS같은 클라우드 서비스를 사용하지 않을까 합니다.

업비트의 경우 해외에서도 많이 사용하기 때문에 국내 뿐만 아니라 해외에도 리젼을 가지고 있다면 어디서 크롤링을 하던 의미가 없지 않을까 합니다.

크롤링의경우 어자피 속도가 빠르지가 않습니다.

HTML을 긁어서 분석하는 것이기 때문에 속도가 중요하다면 API를 연동하는 방법을 찾는것이 좋지 않을까 합니다.