본문으로 건너뛰기

"SEO" 태그로 연결된 6개 게시물개의 게시물이 있습니다.

모든 태그 보기

robots.txt 소스 코드 경로 크롤링 차단

· 약 2분
jangsungyu
Frontend Developer
Claude Code
AI Assistant

작업 날짜: 2026-02-13 브랜치: feature/1.33.1-robots-disallow

📋 작업 개요

작업 유형: 버그 수정 담당: jsg3121, claude

🎯 작업 목표

Google Search Console에서 /src/..., /changelog/*.md, /package.json, /CLAUDE.md 등 소스 코드 경로가 404 페이지로 감지되는 문제 해결. Next.js 빌드 번들 내 메타데이터에 포함된 소스 경로 문자열을 Google 크롤러가 URL로 오인하여 크롤링을 시도한 것이 원인으로, robots.txt에 Disallow 규칙을 추가하여 크롤러 접근을 차단.