문제의 발단
제가 사이트를 배포할 때 NextJS 에서는 동적으로 사이트맵을 생성하는 기능을 지원해주기에 이를 이용해서 사이트맵도 색인 요청을 Google Search Console 을 사용해서 신청했었습니다.
그런데, 아무리 시간이 지나도 구글 검색에 나타나지 않아서 이게 무슨 일이지 싶어서 콘솔에 접속해서 확인해보니, 발견된 페이지는 1,878 개로 정상적으로 식별은 되었는데,
문제는 URL 이 인식은 되지만, 색인이 꼴랑 루트 페이지 하나만 색인이 생성되어 있는 겁니다. 도대체 이게 무슨 일인가 싶지만, 차근차근 해당 문제를 해결해보도록 하겠습니다. 참고로 직접 하나하나 해결하면서 작성하는 것이라 갑자기 글이 끊어질 수도 있습니다. 바로 해결이 되면 짧게, 아니면 길게 작성이 될 수 있어요.
무엇이 문제일까?
일단 나름 원인을 분석해보면, 제가 사이트를 배포하고, 갑작스레 네트워크 연결에 문제가 생겨서 ec2 에 있는 서버가 꺼지는 문제가 발생했었습니다. 해당 문제는 데이터베이스를 로컬에 있는 것으로 복원할 때 생긴 충돌 문제를 해결하기 위해 삽질을 반복하다가 실수로 생긴 문제였지만 즉시 했었지요.
그런데 하필이면 이러한 문제가 발생한 시점이 색인 생성 요청을 해두고, 진행중이었던 상황이었습니다. 그래서 색인이 되던 사이트가 갑작스레 사라져버렸으니 문제가 발생한게 아닌가 싶습니다.
아무튼 어떤 원인으로 인해서 재가 색인 신청한 페이지 모두는 발견이 되었지만, 크롤링이 되고 있지 않는 상태에 놓여 있었습니다.
해당 부분에 대한 도움말을 찾아보니 위에 언급한 대로 현재 상태를 알려주고 있네요.
크롤링이 누락된거라면 색인을 재요청해보면 어떨까요?
그래서 우선 색인을 다시 생성 하도록 요청 하도록 해볼 것입니다. 이게 과연 얼마나 걸릴지는 모르겠지만, 성공한다면 여기서 포스트가 끝나고 실패한다면 다른 삽질로 이어지겠죠.
현재는 색인을 생성중인데, 완료되는 대로 그 결과를 공유해볼 생각입니다. 처음으로 배포 까지 열심히 해본 사이트인데 제발 잘 되었으면 좋겠습니다.
2024년 4월 8일, 구글 콘솔에서 메일이 왔다.
며칠 전에 색인 요청을 다시 보내고, 기다리니 문제가 해결되었다는 메일이 왔습니다. 그럼 이제 저의 사이트가 검색엔진에 노출이 되겠죠??
라고 생각했는데, 요청한 색인이 생성되어 있지 않은 문제가 발생하였네요.
아 이게 도대체 무슨 일인가 싶어서 배포한 사이트의 sitemap 주소를 입력해봤습니다. 예상은 했지만,
투박하게 생긴 404 메시지가 반겨주네요. 재색인 요청 이전에 분명 되는 것을 확인하고 요청을 보냈는데, 이후 사이트를 재배포 하면서 문제가 생긴 것 같습니다. 해당 문제를 해결하고 포스트를 마저 작성하도록 해야 겠네요.
