Robots.txt 파일은 웹 사이트 루트 아래에 있어야 합니다. 예를 들어, 검색 엔진이 웹 사이트를 방문할 때 먼저 해당 웹 사이트에 robots.txt 라는 파일이 있는지 확인하고 robots 로봇 프로그램이 이 파일을 찾으면 해당 파일의 내용에 따라 액세스 권한 범위를 결정합니다.

워드프레스의 로봇 파일 위치

Robots.txt 는 WordPress 웹 사이트의 루트 프로그램에 업로드되지 않았습니다. 검색 엔진과 사용자가 파일을 방문하면 WordPress 프로그램은 검색 엔진과 사용자에게 robots.txt 를 능동적으로 생성합니다. 우리가 작성한 robots.txt 를 사이트 루트 프로그램에 업로드하면 사용자와 검색 엔진 거미가 우리가 업로드한 파일을 방문하면 WordPress 는 더 이상 그 파일을 생성하지 않습니다. 워드프레스는 서버에서 robots 를 찾을 수 없는 경우에만 이 파일을 생성합니다.