php robots.txt 사용방법...급해요 ㅠㅠ
본문
홈페이지에서 / > public_html > robots.txt라는 폴더가 있는데
초기 상태는
User-agent: *
Crawl-delay: 120
이랬습니다.
하지만, 다음, 네비어, 구글에서 어떤 키워드를 검색하면 사이트랑 사이트의 내용 글들이 노출됩니다.
그래서 그 노출되는걸 막으려고 robots.txt를
User-agent: *
Disallow : /
이렇게 설정하였습니다.
이러면 정말 다음, 네이버 구글 등등에서 검색했을때 노출되지 않습니까?
... 노출시키지 않게 하려고합니다 ㅠㅠ
답변 1
네 맞습니다.
아래 링크를 참고하세요.
https://ko.wikipedia.org/wiki/%EB%A1%9C%EB%B4%87_%EB%B0%B0%EC%A0%9C_%ED%91%9C%EC%A4%80
답변을 작성하시기 전에 로그인 해주세요.