robots.txt 소스 코드 경로 크롤링 차단
· 약 2분
작업 날짜: 2026-02-13 브랜치:
feature/1.33.1-robots-disallow
📋 작업 개요
작업 유형: 버그 수정 담당: jsg3121, claude
🎯 작업 목표
Google Search Console에서 /src/..., /changelog/*.md, /package.json, /CLAUDE.md 등 소스 코드 경로가 404 페이지로 감지되는 문제 해결. Next.js 빌드 번들 내 메타데이터에 포함된 소스 경로 문자열을 Google 크롤러가 URL로 오인하여 크롤링을 시도한 것이 원인으로, robots.txt에 Disallow 규칙을 추가하여 크롤러 접근을 차단.
