网站的收录是由空间、网站、内容、抓取量、页面质量决定的。搜索引擎蜘蛛匍匐的进程是这样的，首先检测网站的Robots.txt文件，确定哪些内容制止抓取，哪些内容答应抓取等信息，确定robots.txt答应爬取之后，进入咱们网站的主页，然后经过主页的链接爬取到咱们网站中的内容页或许栏目页，之后再经过栏目页抵达咱们的文章页。

　　已然现已知道了搜索引擎抓取咱们网站的流程，那么咱们接下来就要为您分析影响搜索引擎抓取的原因了，首先：

　　1、网站速度的影响机房问题、dns问题、cdn加速问题、服务器带宽、服务器硬件、操作系统、服务器软件以及服务器所装置的程序，这些都有可能影响咱们网站的打开的速度。

　　2、nofollow标签的合理运用nofollow是一个HTML标签的属性值。这个标签的含义是告知搜索引擎”不要追寻此网页上的链接”或”不要追寻此特定链接。那么咱们所要做的便是，用nofollow来屏蔽掉网站页面重复出现的链接以及对SEO没有很高价值的页面，以减少网站权重的分散，而且能够减少搜索引擎重复抓取网站内每个页面的重复链接，以提高搜索引擎抓取功率。

　　3、网站硬盘问题如在服务器里边装置多个虚拟机，导致硬盘转速变慢，有时会导致搜索引擎打不开网站。

　　4、回来码问题比方同一个链接回来不同的回来码，又或许404页面回来200等

　　5、安全软件问题比方敞开了防火墙规矩、屏蔽了网站端口、敞开防收集规矩、敞开防进犯规矩等，导致了搜索引擎同一时间由于很多访问网站，而导致被安全软件阻拦。

　　6、外链问题咱们发外链的意图有两个，一个是吸引搜索引擎来抓取咱们网站(引蜘蛛)别的一个便是提升网站的排名。外链首先要确保不能单纯的指向主页，要把外链做到指向栏目页、文章页的都有一些。别的做外链的时候一定要考虑一下几个原因：多样性、集中性、平衡性、相关性、准确性、高质量性、人文性等。

　　7、网站的权重网站权重是搜索引擎对这个网站信赖度的一个体现，假如网站的权重够高，那么搜索引擎抓取的也相应的会比较及时，反之则是网站权重低，搜索引擎对其信赖度不高，也许蜘蛛会很久来访问网站一次，相应的抓取频率就很低了。

　　8、网站地图网站地图是将网站的一切衔接，较直观的反应给搜索引擎，能够提高搜素引擎的抓取功率，一起也为添加网站的收录供给了杰出的协助。

　　9、推广网站前期的推广也非常重要，前期推广包括QQ群推广、QQ空间推广、邮件推广、软文推广、论坛外链推广、平台信息推广。一切能引导来用户点击的推广都能够，当然一定要是良性的推广。由于有点击就会给予点击权重，而网页是具有一定权重今后才会被收录。

　　10、PRpr值是谷歌运用的衡量网站质量的一套规范，可是pr关于百度搜索引擎优化来说作用是非常小的，仅仅能够给咱们供给一个参阅价值，可是相对的来说pr的价值并不是很大。

　　11、url静态化URL静态化的意图是有利于网站的排名，尽管现在搜索引擎现已能够收录动态地址，可是在在排名上静态化的页面比动态页面更有优势，

　　而且URL静态化将更有利于添加搜索引擎的信赖度。可是，假如网站真的做不了静态化的话，那就尽量运用短的url而且url中尽量少的运用动态参数。

　　12、url的唯一性网站中的同一个页面，只对应一个url地址;假如网站上多种url都能访问到同样的内容的话，那么就会出现以下问题：a、搜索引擎会选一种url为规范，可能会和正版不同b、用户可能为同一网页的不同url做推荐，多种url方式分散了该网页的权重主张：

　　a、假如你的网站上现已存在多种url方式，主张按以下方法来处理：在系统中只运用正常方式url，不让用户接触到非正常方式的url

　　b、不把session id、计算代码等不必要的内容放在url中

　　c、不同方式的url，301永久跳转到正常方式避免用户输错而启用的备用域名.301永久跳转到主域名

　　d、运用robots.txt制止百度蜘蛛抓取你不想向用户展示的方式13、ulr带关键词尽量在url中带上网站的关键词(拼音)，这样会在排名上面略微的会占据一点原因，要知道百度是中文搜索引擎,对拼音的分析能力是很强壮的。

　　14、代码原因网站的代码要符合w3c的规范，结构层、体现层、行为层标签都应该完好，主张运用开源程序。如：我的博客运用的wordpress程序。

　　15、head信息的正确性网站的三大标签：标题标签(title)、关键词标签(keywords)、描述标签(description)

　　16、内容的原创性前面有说到原创的内容一定会被收录，只不过是时间的问题罢了，不论哪个搜素引擎，都是喜欢原创的内容，网站内容的原创性直接关系到搜索引擎对你网站的信赖度，信赖度又能够经过权重这个参阅来反应出来，所以，网站内容的原创性是网站优化的重中之重。

　　17、内容的重复度转载、或许是收集的文章，页面的文字、页面都和之前页面相同，具有非常高的重复度，那么百度就会计算你和其他网站内容的重复度，搜索引擎是一个喜新厌旧的家伙，假如每次你所发的内容重复度都很高的话，那么渐渐地蜘蛛就会失掉对你网站的兴趣。

　　18、网站的结构网站结构紊乱，内链系统乱七八糟也会导致收录缓慢。比方不同栏意图内容互相做链接，而有的内容链接很多另一些内页链接很少。网站的层次也是一个原因，关于一般的企业站点三层现已足够放置一切的内容，而假如层次太深会影响内页的收录。

　　总结：影响收录的原因大概有这么几个原因：站内站外、技术性原因、文章的原因，这些假如够做好的话，基本上来说，网站的收录就不是个事。