모든 검색엔진 크롤러 정보수집 허용 내 티스토리 블로그 정보 모든 검색엔진이 수집할 수 있게 하기!! 처음 티스토리 블로그를 만들게 되면, 각 종 검색엔진에 내 사이트의 정보를 수집할 수 있도록 설정해 주어야 합니다. 온라인상에는 수많은 사이트들이 있으며, 검색엔진에서 일일이 정보를 수집할 수가 없기 때문에 주기마다 자동으로 사이트 정보를 수집하는 "크롤러"라는 프로그램을 사용하고 있습니다. 이 포스팅에서는 한 번만 세팅하면, 검색엔진 크롤러가 우리 블로그 정보를 수집할 수 있도록 하는 방법에 대해 설명하겠습니다. 구글 크롤러 Robots.txt 파일 설정 · 아래 첨부한 "robots.txt" 파일을 다운로드합니다. · 다운로드한 "robots.txt" 파일에서 아래와 같이 코드를 설정해 줍니다. 파일명은 변경하시면 안 됩니다. User-agent: * Allow:/ Sitemap: (예) https:.. 2022. 8. 30. 이전 1 다음
