Google이 Search Console에서 robots.txt 파일에 대해 인덱싱 요청(request indexing) 또는 재크롤(request a recrawl)을 사용하는 기능에 버그나 문제가 있을 수 있습니다. 일부 사이트에서는 이 기능이 제대로 작동하지 않는 것으로 알려졌지만, 다른 일부 사이트에서는 정상적으로 작동하는 것으로 보고되고 있습니다.
이 문제는 Jay Cooper가 Bluesky에 게시하면서 처음 발견되었습니다. 그는 “현재 robots.txt 보고서의 ‘재크롤 요청(request a recrawl)’ 기능에 알려진 문제가 있나요? 여러 속성에서 매번 오류가 발생합니다. 제 쪽 문제인지 아니면 일시적인 결함인지 궁금합니다.”라고 썼습니다.
다음은 스크린샷입니다:
화면에서 보면 “Re-crawl request failed”라는 오류가 발생하고, 이어서 “Unknown error. Please wait a moment and try again.”라는 메시지가 표시됩니다.
Google의 John Mueller는 처음에 자신의 사이트에서는 작동한다고 답변했으나 나중에 Bluesky에 “아, 다른 몇몇 사이트에서 오류가 보이네요. 제가 살펴보겠습니다.”라고 게시했습니다.
따라서 robots.txt에 대해 이 도구를 사용하려다 문제가 발생한다면 혼자가 아닐 가능성이 큽니다.
아래는 해당 게시물들이 올라온 Bluesky 글들입니다:
