안녕하세요~ 구글 웹 마스터에서 KBOARD 콘텐츠만 '크롤링 오류'가 발생해서 문의를 드리고자 질문을 합니다.
혹시 같은 현상이나 이유가 의심 스러운 부분이 있으시면 말씀 부탁드립니다.
물론 <meta name="robots" content="noindex,follow"> 삽입 되어 있구요, 다른 페이지는 색인이 잘 됩니다.
첨부파일 링크나 insert 가 일어나는 페이지는 $_SERVER['HTTP_REFERER'] 값이 없거나 같은 도메인이 아니면 차단하고 있습니다.
이 때문일까요?