欢迎来到华鼎网络科技,深圳网站优化深圳网站建设移动网站优化深圳seo
咨询,就免费赠送域名与服务器,咨询热线:18824580418当前位置: 主页 > 网站优化 > 网站优化知识 >
推荐内容
联系我们
电话咨询:18824580418 13518121047
E-mail:[email protected]
地址: 深圳市宝安

网站页面怎么做才能更还更快的被收录获得排名

作者/深圳seo:关键词快速获得排 来源:深圳seo 2019-08-09

          网站被动抓取当做好了PC站点与移动站点的适配之后,接下来就是等待百度的抓取收录了。我们可以通过以下几点来加速网站被搜索引擎抓取。
(1)不要通过robots agent封禁的方式调配PC或移动蜘蛛。如果发现你的网站robots文件中出现了User-agent: *和Disallow: /的写法,就代表封禁了所有搜索引擎抓取网站的网页。
(2)不要将重要的页面添加nofollow标签。
(3)不要在服务器端轻易设置屏蔽某IP段的访问,很有可能该IP就是搜索引擎能够识别的百度移动ua。
          意!您需要修改识别方式,新的正确地识别爬虫移动ua的方法如下。① 通过关键词“Android”或者“Mobile”进行识别,判断为移动访问或者抓取。② 通过关键词“Baiduspider/2.0”进行识别,判断为百度爬虫。另外需要强调的是,对于robots封禁,如果封禁的agent是爬虫,会对PC和移动同时生效。即无论是PC还是移动爬虫,都不会对封禁对象进行抓取。之所以要强调这一点,是发现有些代码适配站点(同一个URL,用PC ua打开时是PC页,用移动ua打开时是移动页),想通过设置robots的agent封禁达到只让移动爬虫抓取的目的,但由于PC和移动爬虫的agent都是爬虫,这种方法是非常不可取的。
网站被百度抓取收录
(4)通过百度站长工具中的链接提交工具进行实时提交。 
(5)制作好移动站点的sitemap文件,并通过百度站长工具的sitemap方式提交。
(6)通过分析移动站点的log日志,找到响应代码异常的URL,排查原因并解决。
(7)服务器错误:爬虫发起抓取,httpcode返回码是5××。
(8)访问被拒绝:爬虫发起抓取,httpcode返回码是403。
(9)找不到页面:爬虫发起抓取,httpcode返回码是404。
(10)其他错误:爬虫发起抓取,httpcode返回码是4××,不包括403和404。