티스토리 robots.txt 검색로봇 설정하기

티스토리 robots.txt 설정방법

 

네이버 서치어드바이저에서 진행할 것인데

혹여나 네이버 서치어드바이저 설정이 안되어 있는 경우 아래 링크를 확인하여 진행하면 된다

https://servertrix.com/1665

티스토리 네이버 서치어드바이저 도메인 등록하기

 

설정되어 있다면 네이버 서치어드바이저에 접속하여 검증>robots.txt메뉴 클릭

robots.txt 정보 수집요청을 해도 아무것도 안나오는 경우 혹은 모든 것이 Disallow: /로 되어있는 경우

robots.txt 설정 방법입니다.

robots.txt 항목을 살펴보면

User-agent: *

Disallow: /owner
Disallow: /manage
Allow: /

위와 같이 나오는데 User-agent: * 모든 에어전트에 대해서 Allow: / 전체 허용 이 부분이 있으면 

네이버, 구글, 다음 등 모든 봇에서 수집을 허용하고 있다는 뜻이다

이렇게 설정되어 있는 경우는 모든 검색 로봇에서 수집을 허용하고 있는 상태이므로 추가 설정할 필요가 없다

User-agent: *
Allow: / 

 

모든 검색로봇, 수집 허용으로 설정하고 다운로드를 클릭하여 robots.txt 파일을 다운로드 받는다

 

티스토리 블로그관리 홈(관리자 메뉴)로 돌아와서

스킨 편집 > html 편집 > 파일업로드 클릭하자

추가를 누르고 다운로드 받은 robots.txt파일을 선택해서 업로드 해주면 끝