메인 콘텐츠로 건너뛰기

사용자 지정 User Agent 추가하기

1주 전에 업데이트함

일부 웹사이트는 일반 브라우저에서는 정상적으로 열리지만, Octoparse에서는 열리지 않는 경우가 있습니다.

이러한 문제는 브라우저의 User Agent(UA) 와 관련이 있을 수 있습니다.

User Agent 는 현재 어떤 브라우저와 기기 환경으로 웹페이지에 접속하고 있는지를 웹사이트에 전달하는 문자열입니다.

Octoparse에서는 몇 가지 기본 UA를 제공하지만, 사이트에 따라 기본 UA만으로는 정상적으로 접속되지 않을 수 있습니다.

이 문서에서는 브라우저의 UA를 확인한 뒤, Octoparse에 사용자 지정 UA로 추가하는 방법을 안내합니다.


시작하기 전에

사용자 지정 UA를 추가하려면 아래 두 단계를 진행하셔야 합니다.

  1. 현재 브라우저의 User Agent를 확인합니다.

  2. 확인한 User Agent를 Octoparse에 추가합니다.


1. 브라우저의 User Agent 확인하기

방법 1. 브라우저 버전 페이지에서 확인하기

Chrome 브라우저에서는 아래 방법으로 User Agent를 확인할 수 있습니다.

  1. 주소창에 chrome://version/ 을 입력한 뒤 Enter 키를 누릅니다.

  2. 표시된 정보 중 User-Agent 항목을 찾습니다.

  3. 해당 항목 뒤에 있는 문자열을 복사합니다.

이 방법은 Chrome에서는 사용할 수 있지만, 일부 브라우저에서는 지원되지 않을 수 있습니다.

예를 들어 Firefox나 Edge에서는 아래의 방법 2를 사용하는 것이 더 적합합니다.

1.png

방법 2. 개발자 도구에서 확인하기

이 방법은 Chrome, Firefox 등 대부분의 주요 브라우저에서 사용할 수 있습니다.

1) 대상 웹사이트 열기

먼저 User Agent를 확인하려는 웹사이트를 엽니다.

2) 개발자 도구 열기

키보드에서 F12를 누릅니다.

또는 웹페이지에서 마우스 오른쪽 버튼을 클릭한 뒤 검사(Inspect) 를 선택해도 됩니다.

3) 페이지 새로고침

개발자 도구를 연 상태에서 페이지를 새로고침합니다.

4) Network 탭 클릭

개발자 도구에서 Network 탭을 선택합니다.

5) 요청(Request) 하나 선택

목록에 표시된 요청 중 하나를 클릭합니다.

6) Headers에서 User-Agent 찾기

오른쪽 패널의 Headers 항목에서 User-Agent 값을 찾습니다.

7) User-Agent 복사

확인한 User-Agent 문자열을 복사합니다.

참고

일부 요청에는 User-Agent 정보가 표시되지 않을 수 있습니다.

이 경우 다른 요청을 선택하여 다시 확인해 주세요.

Chrome.png

user_agent.png

2. Octoparse에 사용자 지정 User Agent 추가하기

브라우저의 UA를 확인했다면, 이제 Octoparse에 추가할 수 있습니다.

설정 방법

  1. Octoparse에서 해당 작업을 엽니다.

  2. 작업 설정 버튼을 클릭하여 설정 페이지로 이동합니다.

  3. 실행 설정 > 사용자 지정 user agent 추가하기 로 이동합니다.

  4. 새로 추가할 User Agent의 이름을 입력합니다.

  5. Useragent 값 입력란에 복사한 UA 문자열을 붙여넣습니다.

  6. 추가 버튼을 클릭하여 저장합니다.

  7. 이후 내장 브라우저 항목에서 방금 추가한 UA를 선택합니다.

  8. 저장 를 클릭하여 설정을 완료합니다.


언제 사용자 지정 UA가 필요한가요?

다음과 같은 경우 사용자 지정 UA 설정이 도움이 될 수 있습니다.

  • 브라우저에서는 사이트가 열리지만 Octoparse에서는 열리지 않는 경우

  • 특정 사이트가 모바일 브라우저와 데스크톱 브라우저를 다르게 인식하는 경우

  • 사이트 접속 시 브라우저 환경에 따라 다른 페이지가 표시되는 경우

  • 기본 UA로는 정상적인 접근이 되지 않는 경우


참고 사항

  • 사이트에 따라 브라우저 종류, 운영체제, 기기 유형에 따라 다른 콘텐츠를 표시할 수 있습니다.

  • UA를 변경하면 모바일 페이지 또는 데스크톱 페이지로 인식되도록 조정할 수 있습니다.

  • 다만 UA를 변경하더라도, 사이트 자체의 차단 정책이나 네트워크 환경에 따라 접속이 제한될 수 있습니다.


요약

사용자 지정 User Agent를 추가하려면 다음 순서로 진행하시면 됩니다.

  1. 브라우저에서 현재 사용 중인 UA를 확인합니다.

  2. Octoparse 작업 설정에서 해당 UA를 직접 추가합니다.

  3. 추가한 UA를 선택하고 저장한 뒤 다시 실행해 봅니다.

답변이 도움되었나요?