'검색로봇 제어' 태그의 글 목록

티스토리 블로그와 robots.txt

BLOG Story · 2009. 2. 27. 16:02

티스토리 블로그와 robots.txt

티스토리 블로그와 robots.txt 90년대 중후반부터 HTML을 알게 되었고, 그때부터 홈페이지를 직접 만들고 여러군대서 운영해왔다. 그러다 제로보드를 사용한 홈페이지를 요 몇년간 쭉 써오다 '게시판'의 한계를 느껴 블로그를 알아보게 되었다. 그전에 파란 블로그에선 이미지가 외부로 나갈수 있어서 특히 내가 찍은 사진들을 엄청나게 올리고 홈페이지에 링크를 걸어놨었다. 속도도 빠르고 무제한용량에 외부링크를 해놔도 원본 사이즈대로 뜨니까.. 그렇지만 블로깅을 하기에는 좋은 환경은 아니었다. 그래서 알아본게 네이버 블로그.. 블로그 스킨도 이쁘고 일단 검색이 원활하며 국내에서 가장 많은 유저가 사용한다는거.. 하지만 역시 무언가 갑갑한 테두리안에 갇혀있는건 어쩔수 없다. 특히나 네이버의 그 횡포(?)와 외부..

robots.txt 파일을 사용하여 블로그, 사이트에 대한 액세스 제어하기

BLOG Story · 2009. 2. 27. 16:00

robots.txt 파일을 사용하여 블로그, 사이트에 대한 액세스 제어하기

robots.txt 파일을 사용하여 블로그, 사이트에 대한 액세스 제어하기 robots.txt 파일을 만드는 가장 간편한 방법은 웹마스터 도구에서 robots.txt 생성 도구를 사용하는 것입니다. 파일을 만든 후 robots.txt 분석 도구를 사용하여 파일이 올바르게 작성되었는지 확인할 수 있습니다. robots.txt 파일을 생성한 후 도메인의 루트 디렉토리에 robots.txt 라는 이름으로 저장합니다. 로봇은 이 파일을 루트 디렉토리에서 찾기 때문에 파일을 다른 곳에 저장하면 로봇이 찾을 수 없습니다. robots.txt 파일은 수동으로 작성하거나 텍스트 편집기를 사용하여 만들 수 있습니다. HTML 파일이 아닌 영숫자로 인코딩된 텍스트 파일이어야 하며, 파일 이름에는 소문자를 사용해야 합니다...