1. 我要推广网首页
  2. 软文发布

百度首次公开百度小程序蜘蛛UA渠道

最近,百度第一次以官方形式公开了识别百度蜘蛛的信息,并且表示百度蜘蛛 UA(爬行渠道)目前分为 PC、移动、小程序三个应用场景。还给出了网站识别百度蜘蛛的一些渠道ua示例!

百度首次公开百度小程序蜘蛛UA渠道 百度 微新闻 第1张

在小程序没有出来之前,百度的抓取一般是只针对移动和pc的网页内容,这个一般做网站的都了解,但是在百度最近迷上小程序之后,对小程序的流量倾斜不止一次的在重复,因此相比原来的的 PC 端和移动端,这次百度蜘蛛的爬行渠道也着重提到了百度寄以厚望百度智能小程序,因为百度小程序也是支持移动端,所以同样也能被被百度蜘蛛抓取到!

此外百度官网也给出了作为判断是否是百度蜘蛛的移动、PC、和小程渠道UA示例如图:

百度首次公开百度小程序蜘蛛UA渠道 百度 微新闻 第2张

此外磊哥还了解到,站长们也可以通过 DNS 反查 IP 的方式判断来你站spider 是否来自百度搜索引擎。百度蜘蛛的 hostname 以*.baidu.com 或*.baidu.jp 的格式命名,非*.baidu.com 或*.baidu.jp 一般就是冒充,大家可以酌情屏蔽自己不需要的蜘蛛和来源访问。

来源:卢松松博客,欢迎分享

文章不代表本平台立场,作者:我要推广网,如若转载,请注明出处:https://www.yaotuiguang.com/4799.html

本站发布的内容若侵犯到您的权益,请邮件联系 6@yaotuiguang.com 删除,我们将及时处理!

=========================================

本站资源仅供学习和交流使用,版权归资源原作者所有,请在下载后24小时之内自觉删除。

发表评论

电子邮件地址不会被公开。 必填项已用*标注

Copyright 2013-2018 我要推广网 / 渝ICP备19011031号-1  / 本站由wordpress、阿里云、群英、百度云提供驱动力

联系我们

我们期待与您的每一次沟通!

在线咨询

邮件:6@yaotuiguang.com

工作时间:周一至周五,9:30-18:30,节假日休息

QR code