搜索引擎周边

雅虎搜索引擎爬虫Yahoo! Slurp 将更换域名

2007年3月30日 Post by 散人 in Yahoo! 搜索引擎

看过服务器日志的人一定知道，每个搜索引擎爬虫都有自己的名字，雅虎搜索引擎的爬虫名称是Yahoo! Slurp，其域名是*.inktomisearch.com。之所以有这么古怪的一个域名，是因为Yahoo! 在2002年以2.35亿美元收购了专门从事搜索服务的Inktomi。

为了解决这个历史遗留下来的问题，雅虎将在今后将搜索爬虫的域名改为crawl.yahoo.net，而名称仍然是Yahoo! Slurp。在过度期间，将会发现服务器log 里的crawl.yahoo.net 越来越多，而inktomisearch.com 则越来越少直到消失。过度时间大概为几个星期。
版权所有，转载请务必注明本文链接地址和标题。
链接地址 http://www.eryi.org/SearchEngines/yahoo-crawler-will-change-domain.html