Travel left · Travel right

有些朋友可能知道，有的帖子能够被Google搜索到，但点击链接进去以后却显示“未注册”、“还不是会员”，这是为什么呢？这是一种网站专门针对对搜索引擎优化的技术。

通过这种设置“门槛”的技术，搜索引擎能进，非会员却不能进。这样既能保证搜索引擎对网站的良好收录，又能促进论坛会员的注册量。
那么我们是否能伪装成搜索引擎来进入这些页面？当然是可以的！我们只需要修改浏览器的User-Agent值就可以伪装成相应的蜘蛛。

怎么将IE和Firefox加以伪装成蜘蛛？

1、将IE伪装成蜘蛛

把下列代码保存为use.reg，双击导入到注册表中：


Windows Registry Editor Version 5.00

[HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows\CurrentVersion\Internet Settings\5.0\User Agent]
@=”Googlebot/2.1″
“Compatible”=”+http://www.googlebot.com/bot.html”

这样我们就把IE伪装成谷歌搜索的机器人爬虫了！

2、将Firefox伪装成蜘蛛

下载一个名字为User Agent Switcher的插件，把User-Agent修改成Googlebot/2.1 (http://www.googlebot.com/bot.html) 就行了。

当然除了Googlebot，你也可以伪装成其他任意爬虫程序，只需修改浏览器的User-Agent值。