来自谷歌博客消息:本来谷歌抓取移动设备的蜘蛛统称为Googlebot移动版,谷歌阐发称受此项更新影响的网址不到0.001%,而此项更新可让站长更好地控制对其内容的抓取和编入索引操纵。由于功能手机和智能手机的功能存在很年夜差别,站长一旦屏蔽了Googlebot那么移动版的则全部屏蔽。而此次谷歌称:谷歌将针对智能手机的新型Googlebot用户代理。这个蜘蛛年夜概是未来3、4周后开始工作,且不再将针对智能手机的“Googlebot-Mobile”用感化户代理。以后,针对智能手机的用户代理将直接使用“Googlebot”进行标识。如许即使屏蔽了功能手机的收录。
但针对智能手机的优化不会有影响。针对智能手机的新型Googlebot用户代理:Mozilla/5.0 (iPhone CPU iPhone OS 6_0 like Mac OS X AppleWebKit/536.26 (KHTML, like Gecko Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible Googlebot/2.1 + (iPhone CPU iPhone OS 6_0 like Mac OS X AppleWebKit/536.26 (KHTML, like Gecko Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible Googlebot-Mobile/2.1 + header指令。例如。
使用新型抓取工具后,以下robots.txt指令将屏蔽针对智能手机的新型Googlebot用户代理以及常规Googlebot履行的所有抓取操纵:User-agent: GooglebotDisallow: /以下robots.txt指令将屏蔽Google的功能手机抓取工具履行的抓取操纵:User-agent: Googlebot-MobileDisallow: /。
|