구글링은 안되게 막고 구글 광고는 표시하고 싶을때에 다음과 같이 설정하도록 합니다.
<기존 : 모든 크롤링은 허용하지 않지만 구글봇에게는 허용합니다.>
User-agent:*
Disallow:/
User-agent: Googlebot
Allow:/
<변경 : 구글에서 검색은 안되지만 구글 광고는 가져다 쓸수 있음>
User-agent:*
Disallow:/
User-agent: Mediapartners-Google
Allow:/
참고 사이트
'Server' 카테고리의 다른 글
| [Tomcat] get방식 파라메터 '|' (파이프) 오류 (0) | 2020.07.15 |
|---|---|
| [Tomcat] 톰켓 기초 설정 가이드 (1) | 2018.04.12 |
| [Tomcat] SSL 인증서 설치 방법 (0) | 2016.12.21 |
| Activate HTTPS on JBoss AS 7 (0) | 2016.02.23 |
| [Weblogic] Was 기동 시 User Name / Pass word 묻는 경우 (0) | 2016.02.01 |