前面说过，AdSense的原理是派出搜索机器人获取网页内容，然后给出与内容匹配的相关广告，如果遇到不能抓取的情况，往往是搜索机器人被robots.txt拦截了或者机器人来访的时候网站无法访问，这些信息会反映在AdSense后台的“网站诊断”中。
这些信息可以与其它网站管理员工具（例如后面章节中要说到的Google Analytics和Google Webmastertools）结合使用，确保Google AdSense派出的机器人（User-agent: Mediapartners-Google*）能顺利获得网页内容。
图2 51：Google AdSense后台中的网站诊断界面截图。