点击精灵Logo
您的位置:首页 >seo中级

蜘蛛抓取但是收录不放出来为什么

来源:精灵SEO 发布时间:2021-02-19

  1、爬取和收录的关系:

  爬取和收录并不是包含关系,他们两个是搜索引擎工作的环节,蜘蛛爬取页面后放入临时数据库,等内容通过审查后背放出就形成了收录。所以这两个环节是前后关系,但是没有必然的联系。

蜘蛛抓取但是收录不放出来为什么

  2.蜘蛛抓取页面的过程:

  第一阶段:大小通吃

  搜索引擎蜘蛛过来抓取时,就需要对网站的URL进行一个统一的抓取,也就是站长常说的“大小通吃”的情况。搜索引擎蜘蛛对网页中出现地链接,都会逐一加入到待抓取URL中,机械性的将新抓取的网页中的URL提取出来。这对于很多的站点来说,是比较好的情况。搜索引擎蜘蛛过来抓取时,站长可以通过网站日志有一个清楚的记录。站长可以通过网站日志分析网站优化的基本情况,这仅仅是第一阶段。

  第二阶段:网页评级

  搜索引擎蜘蛛对网站的页面进行抓取以后,就需要对网站的页面进行评级。PageRank是一种著名的链接分析算法,可以用来衡量网页的重要性,很自然的,站长可以用PageRank的思路来对URL进行排序。搜索引擎蜘蛛抓取页面后,会对网站的页面进行下载。但PageRank是个全局性算法,也就是当所有网页有下载完成后,其计算结果才是可靠的。对于中小网站来讲,服务器如果质量不好,如果在抓取过程中,只看到部分内容,在抓取阶段是无法获得可靠的PageRank得分。

  3、蜘蛛爬取成功却不放出来的原因:

  蜘蛛爬取后会将页面放入到临时数据库,搜索引擎再对临时数据库中的内容进行审查,将优质的内容放出并建立索引。所以并不是说爬取就会被收录,还需要内容质量过关才能被放出来并建立索引。不同的蜘蛛抓取的页面评测也不一样,有的是低权重的蜘蛛,有的是高权重的蜘蛛和抓取待定的蜘蛛,这个可以百度搜下各种蜘蛛的情况,来做出各种应对情况

  正常情况下网站提交后次日,spider会放出一个网站主页的快照。再接下来的时间内,会不断的收录索引内容页,并持续的放出。这个过程维护一月、二月、或者是三月,时间不等。如果网站已经有首页放出,说明百度蜘蛛已经有来抓取过,只是内容还没有放出来,多等待些时间即可。如果在等待收录放出的时间阶段不要做任何大的发动。比如说修改title标题、修改url等。否则会延长放出的时间,周期也会变长。

  其次,如果内容和首页都没有放出来,就需要重新向百度提交,通知百度蜘蛛来抓取网站的内容,最好是提交个sitemap地图,手动提交一下。


相关文章内容简介

1 网站优化有权重没有排名问题怎么办?

  在网站的SEO优化中,经常会出现莫名其妙的问题,尤其是网站有权重却没有排名,另外,还有一个重要的困惑就是网站已经收录,快照也更新得很快,但却没有流量!对于这两类问题,笔者做了认真的总结,经过长时间的观察,终于找到了这两类问题的根本原因!   很多网站都经过了精心的优化,几乎达到了第二次。因此,如何开展微博营销,网站的权重自然很高。否则,蜘蛛就没有理由每天24小时呆在网站上。然而,对于这样的网站,排名很差,甚至根本看不到。原因是什么?笔者发现,这与传说中的百度沙盒有关,造成这个沙盒主要有两个原因!   一:网站内容还可以,质量也很高,这是百度乐于收录的根本原因,但内容与网站主题的关系有一定的偏差,连核心关键词都不清楚,这样的网站怎么能显示关键词的排名?百度自然想把这样的网站发到沙盒里进行审核,但内容收录还是没问题,只是排名没有提高!   第二:网站发展过程中的偏离轨道现象。事实上,一些网站在操作后不断修改关键词或修改网站标题,会对百度蜘蛛敏感。对于这样一个权重很高的网站,很容易做出 [阅读全文]

2 网站优化过程中的重要优化关键点

  做网站优化要注重优化的关键点,如关键词、网站结构、内容、链接等,我们今天就来了解一下在网站优化过程中,有哪些十分重要的关键点。   关键词选择   一个网站选择关键词是优化的核心,搜索引擎中关键词的排名影响着网站的权重,我们可以在百度、爱站、5118等seo工具中,选择网站的核心关键词。首页标题关键词在布局的时候一般是3-5个,根据重要性、指数等进行排序,可以在后面添加网站或公司名称。   网站的结构   网站的结构影响着网站的用户体验度和搜索引擎抓取,主要关注的的内容有网站导航栏、网站图片、网站版块和其他版块。   网站内容   网站内容我们已经说过很多次了,网站的内容影响着网站的整体优化效果,优质的网站内容才能对网站有所帮助。   网站内外链   网站内外链可以增加搜索引擎的的抓取,也是衡量网站质量的重要标准,网站内链可以将文章或产品页面seo优化,推荐文章,相关文章,上一篇文章,下一篇文章,在文章中添加一些相关的推荐链接。网站外链可以做一些权重高、相关性强的外部链接,尽量让 [阅读全文]

系统提示

登录密码错误!!!