robots.txt는 검색엔진에 어떤 역할을 하나요?
조회수 1
게시일 2026.04.04
2시간 전 수정
robots.txt는 검색엔진 로봇에게 어떤 경로를 수집해도 되는지, 어떤 경로는 제외해야 하는지를 알려주는 기본 제어 파일입니다. 사이트 전체를 다 열어두기보다 필요한 경로를 구분하는 데 쓰입니다.