지금까지 첫 스크래핑 작업을 제작하고 타깃 데이터를 얻기 위해 작업을 실행하는 방법에 대해 배웠습니다. 그럼, 이제 아래와 같은 더 업그레이드된 기능으로 데일리 스크래핑 루틴을 보다 효과적이고 효율적으로 만들 방법에 대해 알아보겠습니다.

정기적인 데이터 추출이 필요한 경우 작업 스케쥴링 기능을 이용하면 많은 시간과 인력을 절약할 수 있습니다. 작업을 한 번 또는 여러 번 반복으로 실행하도록 예약하거나 1분, 5분, 10분 또는 30분마다 실행되게 반복으로 예약할 수도 있습니다.

STEP 1. 대시보드에서 작업을 찾은 후 다음 실행 열 아래에 있는 미설정을 클릭합니다. 첫 번째 행은 클라우드 스케줄링이고 두 번째 행은 로컬 스케줄링입니다.

STEP 2. 작업을 실행할 빈도를 선택합니다.

STEP 3. 주별 또는 월별 반복의 경우 작업을 실행할 요일/날짜와 시간을 선택합니다.

반복 크롤링의 경우 원하는 시간 간격을 선택합니다.

STEP 4. 설정을 나중에 사용할 수 있도록 미리 저장할 수도 있습니다. 설정 이름을 정하고 저장을 클릭합니다. 이 방식으로 미리 저장된 스케쥴 설정을 선택하여 다른 작업 스케쥴링에 직접 적용할 수 있습니다.

STEP 5. 모든 작업이 완료된 후 스케쥴 ON을 클릭하면 스케쥴에 따라 작업이 실행됩니다.

STEP 6. 작업이 성공적으로 예약되면 대시보드에 다음 실행 시간이 표기됩니다.

대시보드에서 다음 실행 시간을 누르고 스케쥴 ON 또는 스케쥴 OFF를 눌러 쉽게 스케쥴링을 컨트롤할 수 있습니다.

데이터베이스로 데이터 내보내는 작업도 자동화하고 예약할 수 있습니다. 정기적으로 데이터를 데이터베이스로 내보내야 할 때 데이터 내보내기 스케줄링을 통해 인력과 시간을 절약할 수 있습니다.

STEP 1. 작업에 필요한 클라우드 데이터를 로드합니다.

STEP 2. 데이터 내보내기 클릭

STEP 3. 데이터베이스로 자동 내보내기를 누른 후 데이터베이스 유형을 선택합니다.

STEP 4. 데이터베이스에 연결하기 위한 정보를 작성합니다. 연결 테스트를 클릭하여 데이터베이스가 성공적으로 연결되었는지 테스트합니다. 그런 다음 다음을 클릭하여 데이터가 출력되는 시간 간격을 선택합니다.

STEP 5. 마지막으로 다음을 클릭하여 스케쥴링을 마무리합니다.

STEP 6. 데이터베이스로 자동 내보내기 도구에서 자동 내보내기 작업을 찾을 수 있습니다.

Octoparse API를 사용하면 스크래핑 작업을 실행하고, 추출된 데이터를 검색하며, 사용자의 기타 애플리케이션과 협동하여 프로그래밍 방식으로 작업을 편집할 수도 있습니다.

자세한 내용은 API 설명서를 확인하세요.

Zapier를 사용하면 다른 애플리케이션(예: Google 드라이브, Google 시트, Dropbox)과 스크랩된 데이터를 코딩 없이 쉽게 연결할 수 있습니다. 자세한 내용을 보려면 아래 링크로 이동하세요. Octoparse와 Zapier를 연결하는 방법

다음 >> 레슨 7: 총정리! 당신의 첫 번째 스크래핑 작업을 만들어 보세요