스크레이퍼

웹사이트 소스 저장소를 사용하면 공개 웹사이트를 스크랩하여 사용자에게 도움이 될 수 있는 기사를 가져올 수 있습니다. 웹사이트와 리치 콘텐츠는 매우 다양하기 때문에 이 콘텐츠 소스을 사용할 때는 다음 정보를 주의 깊게 읽어보십시오.

웹사이트 옵션

웹사이트 스크레이퍼는 소스 설정에 대한 고유한 옵션을 제공합니다. 이 정보를 기본 소스 저장소 페이지의 절차와 함께 사용하십시오.

URL에서 추출

포함하려는 정확한 URL을 지정할 때는 두 가지 옵션이 있습니다.

• URL: 원하는 만큼 URL을 직접 포함시킵니다. 특정 링크 또는 전체 웹사이트를 지정할 수 있습니다. URL 추가를 클릭하여 각 링크를 추가합니다.
  • 입력된 각 URL에 대해 Amplitude는 해당 사이트에 연결된 가능한 한 많은 링크를 재귀적으로 가져옵니다.
  • 기본 URL 링크에서 액세스할 수 없는 지원 문서가 있는 경우 여러 URL을 사용하십시오.
  • 이 방법은 적용 가능한 모든 링크를 찾지 못할 수도 있습니다.
• 업로드: 포함하려는 특정 URL의 CSV 또는 XML 사이트 맵 파일을 업로드합니다.
  • 소스 저장소를 구성하는 정확한 URL 링크와 페이지를 지정하려면 이 방법을 사용하십시오.
  • 사이트맵을 제공할 때 소스 저장소를 하드코딩하여 새 문서를 자동으로 통합하지 못하게 합니다. 그런 다음 새 기사를 수동으로 추가합니다.
  • CSV 및 XML 파일은 URL과 관련된 특별한 형식을 필요로 하지 않습니다. 사이트맵을 사용하세요.

고급옵션 옵션

URL 섹션 아래의 고급옵션을 클릭하여 다음 옵션에 액세스합니다.

• 다음 URL 경로만 포함: 특정 URL만 포함하여 소스 저장소를 더욱 세부적으로 필터링할 수 있습니다. 이 기능은 전체 웹사이트를 추가할 때 가장 유용합니다.
• 이러한 URL 경로 제외: 소스 저장소에서 특정 URL을 제외하여 소스 저장소를 더욱 세부적으로 필터링할 수 있습니다. 이 기능은 예를 들어 소스 저장소에서 회사의 블로그 게시물을 제외하려는 경우에 유용합니다.
• 기본 선택기 재정의: 포함하려는 콘텐츠 선택기만 지정하거나 웹사이트 요소를 무시할 수 있습니다. 자세한 내용은 다음 섹션을 참조하십시오.

제외된 페이지 재동기화

웹사이트 스크레이퍼는 자동으로 일부 페이지를 무시합니다. 여기에는 일반적으로 랜딩 페이지나 링크만 포함하고 다른 텍스트는 포함하지 않은 페이지가 포함됩니다. 일반적으로 이러한 유형의 페이지는 리소스 센터 문서에 적합한 정보를 포함하지 않으므로 소스 저장소에서 안전하게 제거할 수 있습니다.

그러나 때때로 이러한 페이지를 다시 포함시켜 소스 저장소에서 활성 상태로 유지해야 할 수도 있습니다.

페이지 재동기화

1. 가이드 및 설문조사 > 콘텐츠로 이동하여 원하는 소스 저장소를 선택합니다.
2. 동기화 오류를 클릭합니다.
3. 제외된 페이지를 검색한 후 다시 포함하려는 페이지를 선택합니다.
4. 강제 동기화 및 게시를 클릭합니다.