[Enterprise] 대량 그룹 생성 & 다운로드

대량 그룹 생성 및 다운로드란?

그룹 추출 기능에서는 한 그룹당 최대 500개의 URL까지만 등록할 수 있습니다. 이는 시스템의 안정성과 처리 속도를 최적화하기 위한 제한으로, 너무 많은 URL을 한 그룹에 포함할 경우 처리 시간이 지나치게 길어지거나, 일부 요청이 병목 현상으로 인해 실패할 수 있기 때문입니다.

그러나 수천~수만 개의 URL을 한 번에 등록해야 하는 경우, 500개씩 나누어 여러 그룹을 직접 생성하는 과정이 다소 번거로울 수 있습니다.

이를 간소화하기 위해 엔터프라이즈 플랜에서는 대량 그룹 생성 기능을 제공합니다. 입력한 URL의 개수에 관계없이, 시스템이 자동으로 500개 단위로 분할하여 여러 그룹을 한 번에 생성하고, 추출이 완료된 후에도 여러개의 그룹 태스크를 한 번에 다운로드 할 수 있습니다.

사용방법

1

대량 그룹 등록하기

  1. 그룹 추출 태스크를 생성하는 과정과 동일하게 진행합니다. 우선 그룹 소스가 될 페이지를 추출한 뒤, 결과 페이지 상단의 [+그룹] 버튼을 클릭합니다.

  1. 그룹 URL 입력창에 추출할 URL 목록을 붙여넣고, 입력란 우측 상단의 Task per Group 옵션에서 한 그룹에 포함할 URL 개수를 선택합니다.

예시)

  • 총 1,592개의 URL 입력

  • 500개 단위로 설정 시 -> 4개의 그룹 태스크 자동 생성

  • 100개 단위로 설정 시 -> 16개의 그룹 태스크 자동 생성

  1. 설정을 마친 뒤 하단의 [완료] 버튼을 클릭합니다.

  1. 입력한 URL이 선택한 기준에 따라 자동 분할되어 여러 개의 그룹 태스크로 등록된 것을 확인할 수 있습니다.

2

대량 그룹 다운로드하기

  1. 추출이 완료된 그룹 태스크를 선택한 후 데이터보드 상단의 [다운로드beta] 버튼을 클릭합니다.

  1. 데이터 정렬 방식을 선택한 후 [다운로드] 버튼을 클릭합니다.

  1. 선택한 그룹 태스크들이 하나의 압축파일로 다운로드됩니다.

Previous[Enterprise] 열 이름 지정Next데이터 탐색 용어집

Last updated

Was this helpful?