로봇.txt 해결 방법 문의드려요.

Robot.txt로 도메인 검색 시 페이지가 뜨지 않는데, 해결 방법 안내 부탁드려요