본문 바로가기

IT/Creator

티스토리 robots.txt 검색로봇 설정하기

반응형

티스토리 robots.txt 설정방법

 

네이버 서치어드바이저에서 진행할 것인데

혹여나 네이버 서치어드바이저 설정이 안되어 있는 경우 아래 링크를 확인하여 진행하면 된다

https://servertrix.com/1665

 

티스토리 네이버 서치어드바이저 도메인 등록하기

티스토리 블로그를 운영하고 있고 도메인을 가지고 있는 분에게 유용한 정보입니다. 1. 네이버 서치어드바이저에 접속하고 사이트 등록에 도메인을 입력한다. 2. HTML 태그를 선택하고 메타태그

servertrix.com

 

설정되어 있다면 네이버 서치어드바이저에 접속하여 검증>robots.txt메뉴 클릭

robots.txt 정보 수집요청을 해도 아무것도 안나오는 경우 혹은 모든 것이 Disallow: /로 되어있는 경우

robots.txt 설정 방법입니다.

robots.txt 항목을 살펴보면

User-agent: *

Disallow: /owner
Disallow: /manage
Allow: /

위와 같이 나오는데 User-agent: * 모든 에어전트에 대해서 Allow: / 전체 허용 이 부분이 있으면 

네이버, 구글, 다음 등 모든 봇에서 수집을 허용하고 있다는 뜻이다

이렇게 설정되어 있는 경우는 모든 검색 로봇에서 수집을 허용하고 있는 상태이므로 추가 설정할 필요가 없다

User-agent: *
Allow: / 

 

모든 검색로봇, 수집 허용으로 설정하고 다운로드를 클릭하여 robots.txt 파일을 다운로드 받는다

 

티스토리 블로그관리 홈(관리자 메뉴)로 돌아와서

스킨 편집 > html 편집 > 파일업로드 클릭하자

추가를 누르고 다운로드 받은 robots.txt파일을 선택해서 업로드 해주면 끝

반응형