/robots.txt(1)/setting/5(2)검색 엔진이 위키 내부의 내용을 가져가려면 검색 엔진에게 어떤 파트를 가져가면 된다고 상기 시켜주면 된다. 그 역할을 하는 것이 robots.txt이다.
자세한 내용은
네이버나
구글의 가이드 문서 참고
/setting/5로 들어가서 안에 원하는 robots.txt 설정을 작성하면 /robots.txt에 반영된다.
User-agent: *
Disallow: /
Allow: /$
Allow: /w/