代码之家 › 专栏 › 技术社区 › mhitza Federico Taschin

当你让搜索引擎爬虫通过,但为用户添加了额外的步骤时,你会被搜索引擎惩罚吗?

seo search-engine

mhitza Federico Taschin · 技术社区 · 14 年前

我目前工作的一个项目,其中网站的几个部分可能会受到限制,由于一个地区的用户居住。因此,当用户访问页面时,他会被重定向到一个表单,他必须完成该表单才能查看内容。

this 我的解决方案是检查爬虫的IP地址(可以在我链接的页面上找到),并基于该授权访问。

这个解决方案足够可行吗?我问这个是因为我读过 an article 在官方的googlewebmastercentral博客上,推荐对bot执行DNS反向查找,以匹配其真实性。

TL;DR如果我允许搜索代理bot在重定向用户时直接转到内容,我会受到惩罚吗?哪种方法更好?(与成本/收益相关的用户代理、IP地址或反向DNS查找)

1 回复 | 直到 8 年前

Imre L 14 年前

答案是否定的,

但是有些用户也会绕过你的限制,通过google缓存查看你的页面。

推荐文章

vishnu · Elasticsearch相关性-具有相似名称的文档

7 年前

P.K. · 如何在现有mvc页面上实现搜索引擎

8 年前

user3824280 · 搜索引擎无法使用我的分页器[已关闭]

9 年前

xanderflood · 如何在Python中下载谷歌图像搜索结果

9 年前

RTF · 如何在AWS CloudSearch中使用结构化前缀运算符进行通配符搜索

9 年前

cookiesncream · 全文搜索引擎,多列,布尔模式

10 年前

Zahid · 正在wordpress smilies翻译功能中添加更多字符串。。。它对搜索引擎友好吗?

11 年前

Saqib Ali · 为每个最终用户分离solr索引

12 年前