워드프레스 네이버 검색차단 로봇 robots.txt 해결방법

워드프레스뿐만 아니라 모든 홈페이지를 검색엔진에 노출시키기 위해서는 사이트맵과 RSS를 만들어 검색엔진에 등록하는 작업을 해야합니다.

검색엔진에 등록하지 않는다고해서 검색엔진에 노출이 안되는것은 아니지만 주어진 양식을 제공해서 제출하는것이 검색로봇이 들어와 정보를 가져가서 노출이 잘되게 하는 역활을 하게 만듭니다.

그런데 이러한 작업중에서 네이버 웹마스터도구에서 검색로봇이 제대로 들어오지 못해 검색차단이 된 상태에 있다면 이를 수동으로 해결을 해야합니다.

네이버웹마스터도구 웹페이지 최적화 검증

네이버 웹마스터도구에 들어가 검증 -> 웹페이지 최적화를 확인합니다.

그럼 robots.txt 파일에서 제대로 접근을 하지못해 차단되고 있는 상태임을 확인할 수 있습니다.

robots.txt 검색 로봇 허용

User-agent: Yeti
Allow:/

가장먼저 메모장을 열어 보기와 같이 작성후 txt확장자로 저장합니다.

아니면 아래 파일을 다운로드 합니다.

해당파일은 검색엔진에서 로봇이 활성화 할 수 있도록 합니다.

robots.txt 검색 로봇 차단

User-agent: Yeti
Disallow:/

반대로 검색엔진 로봇이 들어오지 못하도록 차단하는 파일은 아래 있습니다.

파일질라 FTP 접속

다음 해당파일을 워드프레스에 업로드해야합니다.

파일질라와 같은 FTP 프로그램을 설치 후 실행해서 로그인합니다.

보는것과 같이 다운로드한 robots.txt파일을 워드프레스 최상위 경로에 업로드합니다.

참고로로 robots.txt파일은 네이버 웹마스터도구에서도 다운로드가 가능합니다.

네이버 웹마스터에 접속 후 robots.txt 간단생성에서 네이버 검색로봇만 들어오게 할것인지 모든 검색로봇을 허용할것인지 선택해서 다운로드 합니다.

이후 수집요처을 누른다음 설정된 로봇툴이 웹피이지 수집을 할 수 있는지 다시 확인합니다.

그럼 정상적으로 로봇이 수집가능한 상태임을 확인할 수 있습니다.

네이버 웹마스터도구 참고포스팅

• 네이버웹마스터도구 올바른 RSS가 아닙니다 RSS 본문 크기를 줄여주세요
• 네이버웹마스터도구 사이트제목 사이트설명 메타태그 - 티스토리
• 제목이 동일한 웹페이지 네이버 웹마스터도구 seo 최적화
• 네이버 검색엔진 웹마스터도구 사이트맵 RSS 제출

워드프레스 참고포스팅

• 워드프레스 WP ROCKET 최적화 플러그인 기능 및 설정방법
• 워드프레스 사이드바 위젯 모바일 안보이게 설정하기
• 워드프레스 모바일최적화 AMP 플러그인 설정 속도 비교
• 워드프레스 관리자 로그인 주소 admin 백엔드 변경 방법
• 워드프레스 목차 TOC 플러그인 Easy Table of Contents
• 워드프레스 표 만들기 표 짤림 해결방법