在网站访问日志里，看到Mediapartners-Google，搜索一下，原来是Google Adsense的漫游器
Mediapartners-Google
Mediapartners-Google 抓取网页中的文字内容，用于 Google Adsense 分析关键词。只有投放了 Google Adsense 网页才会被 Mediapartners-Google 探测器爬取。
Adsbot-Google 抓取网页中的文字内容，用于为 Google AdWords 提供参考。只有 Google AdWords 目标网页才会被 Adsbot-Google 探测器爬取。
Mediapartners-Google与Googlebot并不相同，google Adsense与网页搜索使用两套不同的的蜘蛛机器人
Googlebot 一般称为 Google 机器人或 Google 探测器或Google蜘蛛。
Google会 派遣不同的 Googlebot 对网页内容进行获取。主要包括：
Googlebot 抓取网页中的文字内容。获取的内容保管于 Google 网页搜索和新闻搜索的数据库。一般谈的 Google 机器人主要指这个。
Googlebot-Mobile 抓取网页中的文字内容，用于 Google 手机搜索。
Googlebot-Image 抓取网页内的图片内容，保管入 Google 图片搜索数据库。
延伸阅读
- 利用google突破各种封锁来下载你要的东西,及特殊的google搜索命令
- google太有才了，pac-man 30周年纪念logo，网页游戏版logo
- 谷歌搜索引擎优化pdf
- 百度和Google的算法区别/Difference between Baidu and Google Algorithm
- 关于google PR：PR0 - Google's PageRank 0 Penalty
- google analytics 中的UTM参数
- 回复：google与facebook的评述性文章
- google搜索设置，打造个性化的搜索：通过google英文版关闭google“安全搜索” （取消启用了安全搜索功能）
- google的更新速度太快了，同时再骂一骂百度
- 国内开启google位置记录功能/android版google maps 7+上，恢复位置记录功能在国内使用(需root)
- 常见user-agent 搜索引擎爬虫蜘蛛user-agent统计表
- user agent 中 PostRank/2.0 (postrank.com; 1 subscribers)是什么
- User-agent 字串史(客户端操作系统浏览器识别)
- User-Agent简介及应用
- 使用User-Agent伪造浏览器，谎称身份欺骗服务器/IE,FireFox,Opera,Maxthon,Chrome,Safari,iPhone
0 条评论。