반응형 Action1 Github Action으로 자동화 돌리기 웹 페이지에서 원하는 데이터를 얻기 위해 보통 크롤러를 만들어 씁니다. Node.js 혹은 python으로 간단히 만들 수 있죠. 거의 대부분의 프로그래밍 언어, 플랫폼으로 가능하지만 단순 크롤링 목적으로는 역시 python이 가장 쓰기 간단합니다. 일회적으로 한번 크롤링하는 정도라면 개발한 pc에서 돌려보면 되겠지만, 만약 특정 주기로 크롤링을 해야 한다면 어떻게 해야 할까요? 단순하게는 내 PC를 항상 켜놓고 특정 시간마다 특정 프로그램이 동작하도록 스케줄러에 등록해주면 됩니다. 하지만 내 PC가 갑자기 맛이 가면? 정전이라도? PC를 바꿨는데 깜빡하고 데이터 백업을 안했다면? 본 포스팅에서는 이러한 고민 거리를 한방에 해결하는 방법을 공유드리고자 합니다. 우선 크롤링 코드를 다루지는 않습니다. 그리.. 2023. 4. 28. 이전 1 다음 반응형
