본문 바로가기
출처 :  

가끔 제 블로그에 들어오셔서 질문하시는분들이 여러명이신것 같아 적어봅니다.

웹사이트나 설치형블로그를 사용하시면 아래 리스트를 테스트해보세요


원인 중 하나로 생각되는 부분


1. 네이버에서 첫 수집이 안되어 있는 상태 (초기에는 크롤링 응답이 없음) 어쩔수없는 부분입니다 기다리는수밖에

2. 네임서버에서 http://www.domain.com ,  http://domain.com  중복으로 같은 ip를 넣고 A레코드 진행

3. 토큰값을 복사해서 붙여넣으면 끝에 띄어쓰기 문제가 일어나는 경우도 있다고 합니다


구글,빙은 신생 블로그/커뮤니티의 컨텐츠를 수집한 후 검색에 반영되는 속도가 빠르던데 

그에비해 네이버 봇이  크롤링하는 타임이 너무 느려서 12시간 단위로 체크해야 움직임이 보이더군요


수집속도에 영향이 있을지는 모르겠지만

최상위 디렉토리에 ROBOT.TXT 파일을 만드시고 아래 룰을 적용해보세요


User-agent: NaverBot

Disallow :Crawl-delay: 2


User-agent: Yeti

Disallow :Crawl-delay: 2

엮인글 :
List of Articles
번호 제목 글쓴이 날짜 추천 수 조회 수
216 KBS다큐- 초딩 해커의 습격. 해킹과 관련된 영상입니다 [1] 김현철 2016-01-26   1326
215 정보 노턴 백신 OEM으로 45개월 (1350일) 사용하기 file 라이진 2016-01-25   1543
214 그외 DB서버와 DATA서버를 분리하는 방법 아시는분 댄디보이 2016-01-20   955
213 세계해커집단 어나니머스 그리고 IS는 누구인가? 잭팟 2015-12-28   684
212 윈도우xp 자동업데이트 실패 해결좀요 [2] zllekftms 2015-12-27   869
211 ERR_SSL_VERSION_OR_CIPHER_MISMATCH 인터넷 오류 원인 가브리엘조 2015-12-01   8295
210 네이버 웹마스터도구가 새롭게 바뀌네요 file 가브리엘조 2015-11-28   591
209 와 6세대용은 윈도우7 설치가 안되다니... [1] 김현철 2015-11-27   1237
» 네이버 웹마스터 도구 수집요청 결과 요청실패 원인을 알아보자 댄디보이 2015-11-05   1920
207 apache의 httpd.conf 설정 팁 프로파일링 2015-10-22   972
206 클라우드 플레어 CDN 서비스, 한국 ICN으로 잡는방법 file [3] 프로파일링 2015-10-22   2553
205 작업관리자에 delfino.exe가 있다면.. (인터넷느려짐) 해결 댄디보이 2015-08-28   11484
204 인텔, 다이렉트12 지원 Windows 10 용 내장 GPU 드라이버 배포실시 file [1] 가브리엘조 2015-08-08   1728
203 [윈도10 앱 개발환경 어떻게 변할까 file 댄디보이 2015-08-05 1 1002
202 그외 웹가상화 클라우드 필요하신분 받으세요 - vSphere Client Download meic 2015-07-31 1 1513
201 윈도우 10 최신판 사용해보니 맥OS 2015-07-25 2 906
200 윈도우의 역사 file 김말이님 2015-07-23   1304
199 MS, 윈도우 10, 빌드 10240 한글판이 토렌트로 풀렸네요 댄디보이 2015-07-23   2098
198 랜섬웨어 치료 가능한가요? [1] 굿모닝 2015-07-20   1468
197 블로그 사이드/아래에 공유버튼 넣기(삽입) file the.100 2015-07-08   576
서버에 요청 중입니다. 잠시만 기다려 주십시오...