App Router

고정 파일은 public, 데이터 기반 목록은 app 라우트에 둔다

루트 URL에 노출되어야 하며 정적 파일과 MetadataRoute 방식 둘 다 쓸 수 있다.

정적 robots.txt

파일public/robots.txt

규칙Allow/Disallow 고정

안내Sitemap 지시어 포함

동적 sitemap.ts

파일app/sitemap.ts

입력DB/CMS 공개 URL

출력url, lastModified 배열

위치

맞는 상황

주의

public/robots.txt

규칙이 고정

민감 URL은 인증 보호

app/robots.ts

환경별 규칙

public 중복 확인

app/sitemap.ts

URL 목록이 동적

차단 URL 제외