深圳金猫标语
网站首页 > 建站百科 > 网站推广 > Baiduspider(百度蜘蛛)是什么?


Baiduspider(百度蜘蛛)是什么?

来源: 金猫数据   点击次数:  更新时间:2013-09-05
百度是如何收录到那么多网页的呢?这个百度用以抓取互联网上数以亿计的网页的程序,就叫做Baiduspider(百度蜘蛛)。它是一个程序,夜以继日得在互联网上找寻新的URL,接着抓取URL上的内容,录入到百度的网页暂存数据库。

百度用来抓取网页内容的程序,叫做Baiduspider(百度蜘蛛),抓取其他内容的蜘蛛,则是新的名字:

百度各个产品使用不同的user-agent:

产品名称 对应user-agent
无线搜索 Baiduspider
图片搜索 Baiduspider-image
视频搜索 Baiduspider-video
新闻搜索 Baiduspider-news
百度搜藏 Baiduspider-favo
百度联盟 Baiduspider-cpro
商务搜索 Baiduspider-ads
网页以及其他搜索 Baiduspider
 

不少朋友会在自己的网站日志里看到这个蜘蛛Baiduspider-cpro,现在我们明白它是百度联盟蜘蛛,用以百度联盟程序匹配相应的广告。

那么,其他搜索引擎的蜘蛛是什么?
谷歌:googlebot  百度:baiduspider   MSN:MSNbot   Yahoo:Slurp



更多

上一篇:如何选择长尾关键词?
下一篇:营销网站

建站百科
最新上线网站
最新动态
官方微博
联系方式
电 话:13715363967
邮 箱:jm3q@jm3q.com
网 址:www.jm3q.com
地 址:深圳市龙华区龙华街道油松科技大厦B栋419

客户服务
售前咨询
QQ:376797323
网站备案
QQ:362226714
技术支持
QQ:2303230985
投诉建议
QQ:479277584
电话咨询
0755-83958156
周一至周五
9:00至18:00点
微客服
扫一扫
回到顶部