淘宝局部解禁百度蜘蛛:开放目录大多和资讯相关
来源:网络 时间:2016-05-26
导读:据国内相关媒体报道,今天收到一个重磅消息,淘宝对百度蜘蛛开放部分目录了,于是赶紧打开淘宝robots协议看看,果不其然,淘宝对百度开放了7个目录,如下图:我...
据国内相关媒体报道,今天收到一个重磅消息,淘宝对百度蜘蛛开放部分目录了,于是赶紧打开淘宝robots协议看看,果不其然,淘宝对百度开放了7个目录,如下图:我们来看看,这次淘宝给百度开放的目录都有些什么?
1 、/article 目录下,都是位于网站地图下的列表页面;
2 、/oshtml 目录下,也是位于网站地图下的全球购,爱逛街等列表页面,开放给百度
3 、/product目录下,很不幸,都是403Fobidden页面(怀疑是操作错误,因为没有理由对搜索引擎开放一个已经403的页面,还专门写一个Robots协议);
4 、/Spu 目录下,很遗憾没找到相应页面;
5、/dianpu 目录下,空欢喜一场,这不是店铺首页,而是繁体的台湾店铺列表页;
6、/wenzhang 目录下,全是淘宝头条下的文章,内容大部分都是分享资讯类页面;
7、/oversea 目录下,没有这个目录。
Robots协议,是国际上搜索引擎对所有网站内容抓取的一个内容协议,通常来说,搜索引擎都必须遵守这个协议。
2008年马云做了一个异常霸气的决定,那就是淘宝在robots.txt协议中屏蔽百度蜘蛛的抓取,这也就是为什么淘宝店铺无法通过百度搜索引起获得流量的原因,马云说百度搜索引擎带来的流量是垃圾量,没多少转化率。
淘宝今天对百度蜘蛛开放目录,显然不会是因为技术出错的原因,从上面的目录架构中可以看出,此次淘宝开放的目录大多是和文章资讯相关,而淘宝店铺之类的目录依然是屏蔽状态。
最新资讯
- 一年新增165家高新技术企业的背后
- 打通“最后一公里” 让民营企业轻装上阵
- 广州企业加速破浪“出海”
- 为企业发展“满格”续航
- 海南民营企业加强自主创新,加快培育新
- 民营企业为汽车产业升级注入新动能
- 10月份我国中小企业生产经营持续改善
- “三力”推动传统制造企业转型升级
- “简”信息“减”材料,这些企业间合并
- 北京市台联开展台胞企业调研活动
- 以数智革新驱动企业高效转型
- “半年报”成绩出炉 上半年我国中小企业
- 2024年“中小微企业日”政策宣讲活动在昆
- 700家黄酒企业该从何处破局?
- 这家企业让烟台诞生了世界级孵化工厂
- 专解企业“急难愁盼”,154名“法特派”
- 淄博:“主动披露”政策红利 引导企业诚
- 焦作沁阳:为企注入“电动力” 助力企业
- 闵行这场月月签,签约10家企业、牵手4家
- 泰安高新区及3家企业分别入选省级工业互