웹마스터 사이트맵 - 크롤링 및 색인 문제
fixemhot
너무 너무 답답한 나머지 여기에 올려봅니다. 혹 비슷한 경험 있으신 분이나, 전문가분 도움 부탁드립니다.
우선 제사이트 url은 http://www.fixemhot.com 입니다.
작년까지만 5월까지만 해도 아무 문제가 없었고, 페이지 랭크도 2까지 올라가 있는 것을 확인하였습니다.
웹사이트를 통한 마케팅으로 접속자도 꾸준히 늘었고 회사 매출에도 큰 도움이 되었었습니다. 그 이후 몇번의 해킹시도가 있었고 실제
로 해킹도 당했었습니다만, 크게 문제되지 않았고 그 이후 별다른 신경을 쓰지 않았었습니다.
연말에 웹사이트 전반적으로 리뉴얼 및 업데이트를 하게 되던 중 중요한 사실을 알게되었는데,
1. 페이지 랭크에가 "2"에서 "순위를매기지 않음"으로 내려갔습니다.
2. 웹사이트 확인 - 오류 - 403헤더에 금지 표시
호스팅 업체에 문의하였습니다. 그랬더니, 해킹 문제로 몇몇 아이피를 막아놨다구 하더라구요.
해결해달라구 해서 웹사이트 확인은 해결되었습니다. (정확이 무엇이 문제였는지 모르겠습니다.)
***여기서 질문 - 구글 웹사이트에서 사이트 확인이 오랬동안 되지 않으면, 구글 색인에서 사이트가 사라지고 패이지 랭크도 없어
지나요?
추가 문제
웹마스터에 접속하고 나서 다음의 문제점들을 추가로 발견하였습니다.
1. 웹마스터 - 웹크롤링 - url시간 초과 - dns조회시간 초과
2. sitemap - sitemap.txt / sitemap.xml - dns조회시간 초과 - 오류
호스팅업체의 프로그래머에게 이야기했더니 원인을 모르겠다구 하다가 서버 이전을 신청해서 지금은 괜찮아 진거 같습니다.(호스팅 업체
에서는 또 원인을 알수 없다구 합니다.)
***그런데, 지금부터 크롤링이 되는지 확인은 어떻게 하며, 결국 사이트 맵을 제출했는데 실제로 제 사이트가 일부라도 구글에 색
인되는데까지 대략 얼마나 시간이 걸리는지요?
제가 책을 읽고 웹표준화 작업 및 웹사이트 최적화 작업을 일부했습니다만...
***정말 아무것두 모르겠고 걱정스럽운데, 혹시 제사이트가 스팸이나 불량사이트 같은 걸루 불이익을 당하거나 삭제되어서 이런문제
가 생겼던 것은 아닐까요?
구글에서 sitemap:www.fixemhot.com검색해보니 색인이 완전히 사라지진 않은것 같습니다.
고수님들의 답변 꼭 부탁드리겠습니다.
감사합니다.!
dafl...@naver.com
안녕하세요.
비슷한 경험이 있고 이곳에서 몇번의 도움을 받았기에 글을 남겨봅니다.
내용을 보면 해외아이피를 제한 두었고 그에 따라 구글봇의 접근이 차단된것으로 보입니다.
아이피차단은 IDC 차원에서 이루어질수도 있고 호스팅업체 차원에서 이루어질 수 도 있습니다.
저는 IDC 차원에서 이루어졌는데 IDC 측이 해외아이피 전체 차단이거나 전체해제만 가능하다고 하여서
현재 차단되어 있는 상태입니다. 물론 구글봇의 접근이 안되고 있습니다.
IDC에서 해외아이피 차단을 풀고나서는 웹마스터도구에서 사이트확인 및 사이트맵제출이 가능하였습니다.
하지만 이후 중국쪽에서 공격을 받아 해외아이피를 다시 닫았고 결국 현재는 사이트확인 및 사이트제출에서 질문자님과 동일한 현상을
겪고 있습니다.
* 저희사이트의 경우 사이트확인이 된 후 일주일정도 후에 구글에 색인이 생성되었습니다.
* 사이트 확인이 되지 않고 시간이 경과하면 점차 색인이 줄어들게되며 예전에 보였 자료라도 보이지가 않게 됩니다.
결국, 구글봇의 아이피 차단이 문제가 되었던 것으로 보이며, 현재 웹마스터도구에서 사이트 확인이 가능하다면 큰 문제가 되지 않을
거라 생각합니다.
구글쪽에서도 아이피차단으로 인한 문제에 대해 인식을 하고 있으나, 대책을 마련하지 못 하고 있습니다.
구글봇의 아이피는 공개불가로, 만약 해외아이피가 대륙별로 차단을 풀고 닫을 수 없다면 구글봇의 접근도 차단됩니다.
IDC쪽에서는 정치적문제와 여러문제를 이유로 중국쪽만 차단하거나, 북미만 아이피를 푸는 경우는 안된다고 대답합니다. 최소한
KIDC의 대답을 그러했습니다.
도움이 되었길 바랍니다.
fixemhot
어디다가 물어봐야 하는지도 모르겠고, 호스팅 업체도 모르겠다구 하구 정말 답답했었는데...
답변 정말 감사합니다.
Fixemhot드림
> > 감사합니다.!- 따온 텍스트 숨기기 -
>
> - 따온 텍스트 보기 -