国外

两年多来,微软的搜索引擎一直在生成虚假信息,这些信息可能会让网站所有者认为他们的搜索流量很奇怪(包括色情流量)

现在是时候结束了

罪魁祸首

微软的“爬虫”,即访问进入搜索引擎的网页的软件

从最近重命名的Bing搜索引擎称为MSN搜索的日子开始,爬虫被称为MSNBot

当该爬虫收集网页时,它有时会在网站的日志中留下“推荐人”信息 - 假的推荐者信息,即

推荐人信息

这是网络浏览器在访问网站之前告诉网站它查看的最后一页的一种方式

一个更好的名称将是“推荐信息”,因为这实际上是推荐人数据显示的内容 - 有效的网页是某人找到您网站的“推荐”

例如,假设有人在Google上搜索电影

在他们的浏览器地址栏中,搜索完成后,网址将如下所示:http://www.google.com/search

q = movie现在当他们点击搜索结果中的商家信息时,他们会离开Goog​​le并转到另一页

到达该页面后,他们的浏览器将报告他们来自的URL - 上面显示的URL

并以粗体显示部分 - “google.com”和“movie

”Google Analytics等网络分析软件使用此功能告诉推荐人,有人来自Google.com搜索过“电影”这个词

这就是怎么回事那些查看网络分析数据的人可以告诉人们用来访问他们网站的词语

微软的抓取工具不像普通的浏览器

抓取工具通常不会报告引荐来源数据

MSNbot没有在自己的Bing搜索引擎上进行搜索,然后按照列表访问新页面

但尽管如此,它的表现似乎确实如此

早在2007年12月,微软承认这个虚假的推荐人问题,并说这是固定的,因为网站所有者在自那年8月以来一直想知道为什么他们显然是色情条款排名

他们不是 - 只是微软说他们在访问MSNbot时留下的信息

为什么这样

解释是,微软正试图打击隐藏真实内容,网站所有者向搜索引擎的抓取工具显示的页面与人类访问者看到的页面不同

从那时起,推荐人不断涌现

搜索引擎土地新闻编辑Barry Schwartz经常记录何时出现

报告来自网络论坛,如WebmasterWorld或Bing自己的论坛

以下是Barry搜索引擎圆桌会议网站上这些报告的简要说明:正如您所看到的,问题再次发生

就其本身而言,微软给了我们这样的解释:关于虚假推荐人问题,网站管理员团队注意到系统中的故障已于8月20日得到解决

如果网站管理员在此日期后继续看到问题,我们建议您直接反馈到[email protected]或通过网站管理员论坛:http://www.bing.com/community/forums/default.aspx

GroupID = 11

需要进一步的反馈意见

不应该两年足以解决微软可能产生的任何产生这些假引用的问题

这是修复它的另一个原因

推荐人是人们可以确定搜索引擎市场份额的一种方式

如果网站所有者看到很多来自Google的推荐人,那么它似乎是一个重要的搜索引擎

如果Bing产生了大量的虚假推荐人,那么它本身似乎拥有比实际市场更多的市场份额

我不认为这就是这些虚假推荐人发生的原因

但这是其他人可能相信的解释,也是简单地阻止这种行为的另一个原因

Barry Schwartz的后记:在我写完这篇以及其他博客之后,微软已经表示他们最终解决了这个问题

他们没有解释为什么会有问题,但他们确实说他们解决了这个问题

这里有更多细节