검색엔진로봇 썸네일형 리스트형 웹 로봇에 대한 질문 및 대답 (FAQ) 웹 로봇에 대한 질문 및 대답 (FAQ)원저자: Martijn Koster 위치: http://aistar.kotel.co.kr/~hiongun/robots/faq.html 목차 웹 로봇에 대해서 웹 로봇이 뭐죠? 에이전트는 뭔데요? 검색 엔진이 뭐지? 어떤 종류의 로봇이 존재할까? 로봇, 스파이더, 웹크로울러, 벌레, 거미?? 로봇이 웹에 해롭지 않나? 로봇에 대한 정보를 더 얻고 싶으면? 색인화 로봇 로봇이 방문할 곳을 어떻게 결정하나? 색인 로봇이 무엇을 색인할지 어떻게 결정하나? 로봇에게 자기 홈페이지를 등록시키는 방법 서버 운영자를 위해서 로봇이 우리 호스트를 방문했는지 어떻게 아나? 로봇이 나에게 방문했어! 어떻게 하지? 로봇이 내 사이트전체를 너무 빠르게 접근하고 있어! 로봇을 내 서버로 부.. 더보기 검색 엔진 봇 (로봇) 네이버 봇 : cowbot 구글 봇 : googlebot MSN 봇 : msnbot 엠파스 봇 : empas 야후 봇 : Slurp head 태그 사이에 삽입. Content의 Value default = empty = "ALL" "NONE" = "NOINDEX, NOFOLLOW" 출처 : http://mykinoko.tistory.com/22 더보기 이전 1 다음