Semalt : WordPress 웹 사이트를 크롤링하지 못하도록 검색 엔진을 중지하는 방법

많은 사람들이 검색 엔진 이 WordPress 웹 사이트를 크롤링하지 못하게하려고합니다. 이상하게 들릴지 모르지만 일부 사람들은 검색 엔진이 완전히 준비 될 때까지 사이트를 크롤링해서는 안된다고 생각합니다. 숙련 된 웹 사이트 디자이너 또는 웹 개발자 인 경우 검색 엔진이 사이트를 크롤링하는 것을 쉽게 막을 수 있습니다. WordPress를 사용하여 사이트를 개발 한 경우 Google이 웹 페이지를 크롤링하지 못하게 막을 수 있습니다. 몇 가지만 변경하면됩니다. 어떤 사람들은 로컬 환경을 만드는 대신 라이브 사이트에서 일하는 것을 좋아합니다. 그리고 일부 개인은 점점 더 많은 고객을 유치하기 위해 포트폴리오를 구축하기위한 자체 프로젝트를 진행하는 것을 좋아합니다. 따라서 포트폴리오가 훨씬 중요하기 때문에 사이트를 색인 할 필요가 없습니다.

Semalt Digital Services의 고객 성공 관리자 인 Max Bell은 여기에서 검색 엔진이 웹 사이트를 크롤링하지 못하게하는 실질적인 가이드와 그 이유를 설명합니다.

워드 프레스 관리자 패널 사용하기

첫 번째로 가장 중요한 단계는 검색 엔진이 웹 페이지의 색인을 생성하고 크롤링하지 않도록 WordPress 관리 패널을 사용하는 것입니다. WordPress에 익숙한 경우 이와 관련하여 사용할 수있는 플러그인을 알고 있어야합니다. 설정 옵션으로 이동하여 아래로 스크롤하십시오. 검색 엔진이 WordPress 사이트의 색인을 생성하지 못하게하려면 클릭해야하는 확인란이 표시됩니다. 완료되면 창을 닫기 전에 모든 설정을 저장하는 것을 잊지 않아야합니다.

헤더 섹션에 메타 태그를 수동으로 추가

WordPress 사이트의 머리글과 바닥 글에 메타 태그를 추가하는 것이 중요합니다. 여기에는 두 가지 옵션이 있습니다. 워드 프레스 플러그인을 사용하여이 작업을 수행하거나 테마 파일로 이동하여 메타 태그를 수동으로 삽입 할 수 있습니다. 머리글 및 바닥 글 섹션에 메타 태그를 추가하는 것이 중요하며 검색 엔진이 웹 사이트를 크롤링 할 수 없습니다. 많은 사람들이 이러한 파일을 편집하는 방법에 대해 혼란스러워하지만 쉽고 간단한 단계입니다. 웹 크롤러를 차단하기 위해 Robots.txt 파일을 편집하면됩니다.

웹 크롤러를 차단하기 위해 robots.txt 파일을 편집하십시오.

검색 엔진이 사이트를 크롤링하지 못하도록 robots.txt 파일을 편집 할 수 있습니다. 이 파일은 웹 페이지 및 기사의 색인 생성을 처리하는 데 사용됩니다. 색인을 생성 할 페이지와 색인을 해제 할 페이지를 확인할 수 있습니다. 이를 기반으로 설정을 조정할 수 있으며 해당 설정을 저장하는 것을 잊지 마십시오. 모든 봇을 동시에 허용하지 않을 수도 있습니다. 이 파일을 사용하면 해당 작업을 효율적으로 수행하고 웹 크롤러가 웹 사이트를 크롤링하지 못하게 할 수 있습니다. 이를 위해 몇 개의 텍스트 파일을 작성하고 특정 코드를 추가해야합니다. 창을 닫기 전에 해당 파일을 모두 저장하십시오.

비밀번호로 보호

비밀번호로 보호 된 디렉토리를 사용하여 검색 엔진이 사이트 색인을 생성하지 못하게 할 수 있습니다. 이를 위해서는 사이트의 cPanel로 이동하여 옵션 (Password Protection Directories)을 클릭해야합니다. 그러면 몇 개의 디렉토리를 볼 수있는 새 페이지가 열립니다. 여기서 사용자 이름과 비밀번호가 삽입 된 public-HTML 디렉토리를 찾아야합니다. 이 섹션에 정보가 없으면 검색 엔진이 사이트를 크롤링 할 수 없습니다.

위의 방법을 염두에두고 거의 모든 웹 마스터와 블로거는 검색 엔진이 웹 사이트 색인을 생성하지 못하게 할 수 있습니다.

mass gmail