据国内相关媒体报道,今天收到一个重磅消息,淘宝对百度蜘蛛开放部分目录了,于是赶紧打开淘宝robots协议看看,果不其然,淘宝对百度开放了7个目录,如下图:
我们来看看,这次淘宝给百度开放的目录都有些什么?
1 、/article 目录下,都是位于网站地图下的列表页面;
2 、/oshtml 目录下,也是位于网站地图下的全球购,爱逛街等列表页面,开放给百度
3 、/product目录下,很不幸,都是403Fobidden页面(怀疑是操作错误,因为没有理由对搜索引擎开放一个已经403的页面,还专门写一个Robots协议);
4 、/Spu 目录下,很遗憾没找到相应页面;
5、/dianpu 目录下,空欢喜一场,这不是店铺首页,而是繁体的台湾店铺列表页;
6、/wenzhang 目录下,全是淘宝头条下的文章,内容大部分都是分享资讯类页面;
7、/oversea 目录下,没有这个目录。
Robots协议,是国际上搜索引擎对所有网站内容抓取的一个内容协议,通常来说,搜索引擎都必须遵守这个协议。
2008年马云做了一个异常霸气的决定,那就是淘宝在robots.txt协议中屏蔽百度蜘蛛的抓取,这也就是为什么淘宝店铺无法通过百度搜索引起获得流量的原因,马云说百度搜索引擎带来的流量是垃圾量,没多少转化率。
淘宝今天对百度蜘蛛开放目录,显然不会是因为技术出错的原因,从上面的目录架构中可以看出,此次淘宝开放的目录大多是和文章资讯相关,而淘宝店铺之类的目录依然是屏蔽状态。
小编推荐阅读深度详解王者荣耀深渊王者段位要求(从细节到实战,解析深渊王者段位升级技巧攻略)
阅读《明日方舟》最强先锋干员推荐指南(打造最强先锋战队,从干员推荐到培养全解析)
阅读《魔兽世界》怀旧服技巧指南大全(挑战圣光的召唤任务,为部落联盟赢取荣誉)
阅读探寻江湖中的宝藏——寻找《烟雨江湖》西子君剑线索的攻略技巧最新(游戏中怎样获得西子君剑线索?)
阅读星露谷物语下水道屏障破解攻略技巧指南(助你轻松突破下水道难关,快速获得丰厚奖励)
阅读《燃烧意志路奇加点攻略技巧指南》(航海王游戏中路奇如何加点,最新推荐汇总)
阅读王者荣耀史诗皮肤卡意思一览大全(探索王者荣耀史诗皮肤的故事,了解背后的涵义)
阅读《重返深渊锁镰》武器攻略大全最新(每把武器攻略,助你通关游戏)
阅读《DNF》游戏牛郎星的光辉快速获得攻略技巧(跨越星际尽享荣耀)
阅读探秘梦幻模拟战手游雾风的技能属性攻略(雾风技能解析,让你成为游戏中的绝佳战士)
阅读怎样选择合适的门派成为《我的侠客》游戏高手?(掌握门派特点,选择最佳武功路线)
阅读