存档

文章标签 ‘Googlebot’

几种以 Googlebot 查看网页的方式

2009年12月4日 Darwin 3 条评论

之前猎眼大侠做了一个非常精彩的案例分析:站群利用黑客技术和 Cloaking 来进行链接隐藏,并提供给目标网站的强大支撑。

其中有讲到如何将自己以 Googlebot 的方式来进行网页观察和分析,并进行了实际案例的分析,这里引用两个图和一段文字:

googlebot-1

图1

googlebot-2

图2

用 Googlebot 的视角来看这个目标网页,效果是不一样的,其中一个带有cloaking。

猎眼提到的方法是:

设置方法,打开火狐,Ctrl+T新建一个浏览标签,输入:about:config,打开配置页面,右键点击页面选择“新建→字符串”,在弹出的窗口中 输入:general.useragent.override,确定之后,输入:Googlebot/2.1(…

标签: ,

模仿 Googlebot 机器人查看你网页的代码:Fetch as Googlebot

2009年10月15日 Darwin 1 条评论

Google 网站管理员工具刚刚发布了一个 Labs 功能,其中有个功能叫做 Fetch as Googlebot ,你可以在这里模仿googlebot,查看你自己的网页代码。不过这个功能是必须通过管理员验证的网站才能查看,没有网站管理权限就没机会了。

而在这个 Labs 功能下面还有一个查看恶意软件的细节功能,自动侦测。

Fetch as Googlebot

在这个功能下,你可以查看任何你自己站点页面代码,通过 Google 机器人的视角,好好的审视自己的站点。操作过程很简单,只要点击 Labs 打开功能,点击 Fetch 按钮查看,等待google机器人的处理,几秒钟后,再刷新一下就可以看到结果了。

fetch-as-google

有朋友奇怪了,这和我们平时看网…