블로그 글을 쓰고 나서 서치 콘솔과 네이버 서치어드바이저에서 URL검사를 했는데 URL검사에 실패했다고 결과가 나오면 어떻게 해야할까? 해결방안으로 3가지를 소개합니다.
URL검사 시 실패가 뜨는 이유
URL 검사 실패가 뜬다는 건, 구글이나 네이버가 블로그 페이지를 제대로 읽지 못했다는 것입니다. 즉, 크롤링/색인 문제가 있다는 신호입니다. 보통 URL 검사 실패하면 크게 3가지 상황을 유추해 볼 수 있어요.
1. 사이트 접근 불가 (서버 문제)
서버가 일시적으로 다운됐거나 느려서 크롤러가 접속 못함.
* 해결방법 : 그냥 기다렸다가 다시 검사해 보는 걸 권장합니다.
잠깐 서버 문제인 경우가 많습니다. 1-2시간 후 다시 검사를 시행합니다.
2. robots.txt나 noindex 태그 설정 문제
사이트가 "크롤러 접근 금지" 걸려 있을 수도 있습니다. 예를 들면, 티스토리나 블로그스팟에서 "검색엔진 차단" 옵션이 켜져 있는 경우입니다.
*해결방안 : robots.txt 파일 확인 → "Disallow: /" 이런 거 있으면 안됩니다.
특히, 티스토리는 글 작성할 때 '공개 설정'이 '비공개'나 '검색 차단'이면 크롤러가 못 봅니다.
블로그스팟에서 설정-밑으로 내리면 크롤러 및 색인에서 켜줍니다. 만약 그래도 안될 경우에는 맞춤 사용 설정에 밑에 이것을 넣어줍니다.
User-agent:*
Allow:/
Sitemap: https://본인 블로그 주소/sitemap.xml
3. 사이트맵 문제 / URL 구조 문제
사이트맵 제출이 안 되어 있거나, URL이 이상한 경우 (특수문자, 한글 URL 오류 등)
* 해결 방법 : 사이트맵을 다시 생성해서 제출합니다. (sitemap.xml)
*추가 설명*
URL 검사 실패 세부 메시지 보는 것도 중요합니다.
> "서버 응답 없음" → 서버 문제
> "403 금지됨" → 접근권한 문제
> "404 없음" → URL 오타, 페이지 삭제됨
> "Soft 404" → 페이지는 있는데, 내용이 거의 없어서 무시당함
* 구글 서치콘솔에서 자세히 보면 왜 실패했는지 알려줍니다.
4. URL이 한글로 되어 있는 경우
예를 들어,
https://(내 블로그 주소).com/entry/하이-글로시-성경-구절-시계
이렇게 주소를 해서 블로그 글을 썼다면, 문제가 될 수 있는 부분은
URL이 한글로 되어있다는 것입니다. 이것은 문제 발생 가능성이 있습니다.
한글로 된 URL은 문제가 될 수 있는 이유는 구글 크롤러는 기본적으로 URL을 "퍼센트 인코딩(percent-encoding)"해서 읽어야 합니다. 네이버/구글 모두 한글 URL을 싫어하진 않지만, 가끔 서버 세팅/SSL 인증서/리디렉션 문제로 한글 URL에서 크롤링 실패가 일어납니다.
* 해결 방법: 그래서 가능한 한글 URL 대신 영문 URL로 포스팅합니다.
https://(내 블로그 주소).com/entry/하이-글로시-성경-구절-시계
https://(내 블로그 주소).com/entry/high-gloss-bible-verse-clock
만약 미리 발행한 글이 있다면, 이미 색인이 들어갔기에, 글을 초안으로 돌린 다음에 맞춤 퍼머링크에 영어로 바꾸거나, 새롭게 글을 쓰는 것을 추천합니다. 한글 URL을 그냥 놔두면 구글 서치 콘솔에서도 "URL 오류"가 더 쌓이게 되므로, 처음부터 영어로 하는 게 SEO에 훨씬 유리합니다.
