크롤링 허용, 색인 대상, 갱신 신호를 함께 맞춘다
검색 엔진이 접근할 수 있는 URL과 제출한 URL 목록이 모순되지 않아야 한다.
점검 축
확인 값
A급 기준
개선 신호
크롤링
Allow/Disallow
중요 URL 허용
정식 콘텐츠 차단
색인 대상
sitemap loc
공개 canonical만
404·redirect 포함
갱신
lastmod
변경 시간 반영
오래된 URL 유지
검증
Search Console
제출 성공
robots 차단
A급 기준: robots가 허용하는 공개 콘텐츠 집합과 sitemap이 제출하는 URL 집합이 같아야 한다.