google爬虫是什么？

admin 2024-07-18 互联网 0

Google爬虫

算法优秀，反应速度迅速，对内容质量把握优秀，中等强度爬虫程序，对服务器负担不大，推广效果好。

对应user-agent：爬虫名称

Googlebot：google网页爬虫

Googlebot-news：google新闻爬虫

Googlebot-image：google图片爬虫

Googlebot-video：google视频爬虫

Googlebot-mobile：google移动爬虫

Mediapartners-google或Mediapartners(googlebot)：google广告爬虫

Adsbot-google：google着陆页质量检测爬虫

google爬虫是什么？