옥토파스에서 모든 일은 ‘작업(Task)’을 만드는 것부터 시작됩니다. 옥토파스에서는 이 작업을 ‘봇(Bot)’, ‘에이전트(Agent)’, 또는 ‘크롤러(Crawler)’라고 부르기도 합니다. 이 명칭들은 모두 같은 의미로, 프로그램이 따라야 할 일련의 설정 세트를 뜻합니다. 일반적으로 하나의 작업은 하나의 웹페이지 또는 동일한 페이지 구조를 가진 여러 페이지에서 데이터를 수집하도록 구성됩니다.

작업을 만드는 과정은 간단합니다.

데이터 선택이 완료되면, 옥토파스는 사용자가 웹페이지에서 어떤 동작을 했는지(예: 버튼 클릭, 메뉴에 마우스를 올림, 특정 데이터를 선택함 등)에 따라 자동으로 워크플로우를 생성합니다.

옥토파스는 실제 사용자의 웹 브라우징 행동을 시뮬레이션하며 클릭, 검색, 페이지 이동 등의 과정을 거쳐 목표 데이터를 추출합니다. 이 모든 과정은 워크플로우에 기록된 단계별 지침을 따르며 수행됩니다. 이것이 옥토파스가 웹페이지에서 데이터를 추출하는 방식입니다.

옥토파스에서 작업을 만드는 방법은 두 가지입니다:

사용자 지정 작업은 이름 그대로 사용자가 원하는 대로 크롤링 과정을 설정할 수 있습니다.
예를 들어:

이런 식으로 완전히 자신만의 수집 과정을 구성할 수 있습니다.
즉, 어떤 웹사이트든 데이터를 수집하려면 ‘사용자 지정 작업’만으로 충분합니다.

반대로, 작업 템플릿은 이미 미리 설정된 작업들을 제공합니다.
유명하거나 자주 사용되는 웹사이트에 대한 크롤링 구성이 기본으로 포함되어 있으며 사용자는 검색어, 페이지 URL 등의 변수만 입력하면 해당 웹사이트에서 미리 정의된 데이터 세트를 바로 추출할 수 있습니다.

지금 바로 데이터를 수집해보고 싶으신가요?
단계별로 첫 번째 작업을 만들어보는 입문 레슨을 따라가 보세요.

작업 이름은 URL을 입력하여 저장할 때 자동으로 생성됩니다.

빠른 액션