이 페이지에는 검색 엔진과 로봇에게 페이지의 색인을 생성할지 여부를 지시하는 메타 로봇 태그가 포함되어 있습니다.
https://en.wikipedia.org/wiki/Robots_Exclusion_Standard
문서 표준