목록robots.txt (1)

져니의 개발 정원 가꾸기

Spring Boot에서 Robots.txt를 추가했는데 왜 적용이 안될까? (feat. 스프링 MVC 자동구성)

목차 배경 Spring Boot 프레임워크로 개발된 운영 프로젝트 중에서 "사이트 페이지 전체에 대해 인증된 회원들만 접근할 수 있다"라는 요구사항을 가진 서비스가 있어, robots.txt를 통해 검색엔진이 사이트의 정보를 수집/크롤링하지 못하도록 robots.txt를 적용할 필요가 있었다. 많은 블로그에서 기본 정적리소스 폴더에 robots.txt만 추가해도 적용되어 [도메인 url 최상단]/robots.txt 경로로 접근 가능하다고 하지만, 사실상 spring boot 구성 설정이 어떻게 되어 있는가에 따라서 파일만 추가하는 것으로 적용되지 않는다. 이에 설정에 따라 robots.txt를 적용하는 방법에 대해 알아보고자 한다. Robots.txt robots.txt는 뭐하는 애일까? robots.t..
개발노트/Spring | Java 2024. 2. 18. 23:58
이전 Prev 1 Next 다음