여러분도 알고 계시겠지만, 애드센스 크롤러가 광고를 게재하고 있는 페이지에 접근할 수 있도록 설정해 놓는 것이 중요합니다. 크롤러가 여러분 페이지에 올라와 있는 콘텐츠를 읽어내지 못할 경우 광고 타겟팅이 제대로 이루어지지 않아 수익률이 떨어지는 결과는 낳을 수 있습니다. 덧붙여, 페이지의 모든 내용들이 정책에 준수하는 것 또한 중요합니다. 이러한 점을 염두하며, 성공적인 애드센스 크롤을 위해 확인해야할 2가지 항목을 알려드리도록 하겠습니다.
1.Google 광고와 함께 robots.txt 파일을 사용하고 있는 경우의도치 않게 Google 광고와 robots.txt를 함께 사용하실 경우 애드센스 크롤러가 여러분의 사이트를 읽지 못할 수도 있습니다. Robot.txt file이란 여러분의 도메인에 포함시키는 텍스트 파일로서 크롤러로가 여러분의 사이트에 접근을 하지 못하도록 막는 역할을 합니다. 여러분의 도메인에 robots.txt가 적용되었는지는XXXX.co.kr/robots.txt와 같이 소유하고 계신 도메인에 /robots.txt를 덧붙여 접속해 보시거나 계정내의 '사이트 진단'에서 확인이 가능합니다. 만약 robots.txt 파일을 사용하여 특정 크롤러로 하여금 여러분의 사이트에 접근하는 것을 막고 계시다면 애드센스 크롤러로 하여금 애드센스 광고 코드가 있는 사이트에 접근할 수 있도록 설정을 바꾸시는 것을 추천드립니다. 또한 애드센스 크롤러는 검색엔진을 위한 크롤러인 Google bot와는 다른 크롤러임을 염두해 두시기 바랍니다.
애드센스 크롤러의 접근을 허용하기 위해서는 robots.txt파일에 아래의 두 줄을 추가하시면 됩니다.
User-agent: Mediapartners-Google*Disallow:
애드센스 계정내의 ‘보고서’탭의 ‘사이트 진단’링크를 통해 여러분의 페이지를 크롤러가 읽는 데에 문제가 있는지 확인하실 수 있습니다. 애드센스 크롤러(Mediapartners-Google 크롤러)는 애드센스 코드가 심어져 있는 페이지의 내용만 파악을 하며 읽은 내용은 외부에 공개가 되지 않기에 개인정보 보호 문제에대해서는 안심하셔도 됩니다.
2.페이지가 로그인으로 제한되어 있는 경우
로그인 된 사용자만이 접근할 수 있는 페이지 또한 저희 크롤러가 콘텐츠를 읽어오는데에 어려움이 있습니다. 여러분의 사이트 내의 특정 페이지가 로그인 된 사용자들에게만 접근이 가능하며 이 페이지에 광고를게재 했을 경우 Mediapartners-Google 크롤러에게 권한을 부여해 주는 것이 중요합니다. 이러한 경우에는 ‘애드센스 설정’ 탭내의 ‘사이트 인증’링크를 통해 해결하실 수 있습니다.
사이트 진단 기능을 사용하면서 다른 이유로 인해 사이트 차단되는 경우가 있을 수 있습니다. 여러분의 사이트가 차단되고 있는 이유에 대해서 보다 자세히 알아보시려면 저희 도움말 센터를 참조하세요. Google 광고가 있는 페이지를 크롤러가 읽을 수 있도록 허용함으로써 타겟팅이 가장 잘 이루어진 광고들이 보여질 수 있으며 이는 곧 좋은 수익률로 이어질 것 입니다.
애드센스 팀 Ben Ewing 작성
