'크롤링' 텍스트큐브 블로그 검색 결과
-
nslzen의
nslzen님 |
2008/10/21 11:28
네이버 블로그가 2008.10.16일 외부 검색엔진에 크롤링을 허용했다. 네이버블로그 공지 http://section.blog.naver.com/NoticeList.nhn?mode=r&nid=1123 2008.10.20 일 현재 robots.txt 파일이다. http://blog.naver.com/robots.txt User-agent: * Crawl-Delay: 5 Dis...
-
블로그가 검색엔진에 검색되지 않도록 하는 방법은 몇 가지가 있습니다. 첫번째. 검색엔진을 운영하는 회사에 직접 요청을 하는 방법입니다. 다음이나 네이버 같은 검색 사이트에는 고객센터 등등 잘 뒤젹거려보면 검색제외신청을 할 수가 있답니다. '블로그...
