스크래핑 작업을 완료하고 데이터를 성공적으로 추출하셨나요?
이제 다은 단계를 넘어가서 매일 반복되는 스크래핑 작업을 더 효율적으로 자동화해보세요.
Octoparse는 다음과 같은 기능을 제공합니다:
작업 스케줄링
자동 데이터 내보내기 (Cloud 데이터용)
API 연동
Zapier 연동
1. 작업 스케줄링
정기적으로 데이터를 수집해야 한다면 스케줄링 기능을 사용해보세요.
작업을 원하는 시간 간격(1분, 5분, 10분, 30분 등)으로 자동 실행할 수 있습니다.
STEP 1. 대시보드에서 원하는 작업을 찾고, 다음 실행 열의 설정 없음을 클릭합니다.
첫 번째는 Cloud 스케줄, 두 번째는 로컬 스케줄을 위한 설정입니다.
STEP 2. 필요에 따라 작업을 얼마나 자주 실행할지 선택합니다.
STEP 3. 설정을 저장해 두었다가 나중에 재사용할 수도 있습니다. 설정에 이름을 지정하고 저장을 클릭하세요. 이렇게 하면 다른 작업에도 동일한 스케줄 설정을 쉽게 적용할 수 있습니다.
STEP 4. 모든 설정이 완료되면 예약 ON을 클릭하여 즉시 스케줄에 따라 작업이 실행되도록 합니다.
STEP 5. 작업이 스케줄에 등록되면 대시보드 다음 실행란에서 시간이 표시됩니다.
작업 목록에서 다음 실행 시간을 클릭하면 예약 ON 또는 예약 OFF를 선택하여 쉽게 켜거나 끌 수 있습니다.
2. 자동 데이터 내보내기 (Cloud 데이터 전용)
데이터베이스로의 데이터 내보내기도 자동화하고 스케줄링할 수 있습니다. 정기적으로 데이터베이스로 데이터를 내보내야 한다면 이 기능을 통해 많은 작업 시간을 절약할 수 있습니다.
STEP 1. 작업에 연결된 Cloud 데이터를 확인합니다.
STEP 2. 데이터 내보내기를 클릭합니다.
STEP 3. 데이터베이스로 내보내기 항목에서 설정을 클릭하고, 사용 중인 데이터베이스 유형을 선택합니다.
STEP 4. 데이터베이스 연결 정보를 입력하고, 연결 테스트를 클릭하여 연결 상태를 확인합니다. 연결에 성공하면 다음을 클릭하여 필드를 매핑하고 데이터 내보내기 간격을 설정합니다.
STEP 5. 모든 설정이 완료되면, 확인을 클릭하여 마무리합니다.
STEP 6. 자동 내보내기 설정은 데이터베이스 자동 내보내기 도구에서 확인할 수 있습니다.
3. API를 통해 연결
Octoparse API를 사용하면 스크래핑 작업을 실행하고 추출된 데이터를 가져오며 작업을 프로그램적으로 수정할 수도 있습니다.
자세한 내용은 API 문서를 참조하세요.
4. Zapier를 통해 연결
Zapier를 이용하면 스크래핑된 데이터를 Google Drive, Google Sheet, Dropbox 등 다른 애플리케이션과 손쉽게 연결할 수 있습니다. 코딩 없이도 가능합니다.
자세한 정보는 다음 문서를 참고하세요:
Octoparse와 Zapier 연결 방법