自从前几次百度、google更新算法后，新站一般来说1,2个星期就足够被搜索引擎收录了，但是还是有许多新站不被收录。尤其是新站刚开始时要做的事情很多，有些人刚开始做站的时候，大大咧咧的，一不小心忘了哪个细节或者做了一些搜索引擎不喜欢的事情都有可能导致网站不被收录，而且在不被收录后找问题一般都是朝大方向去找，很少注意一些细节，或者对搜索引擎不了解，不知道搜索引擎的喜好，错了也不知道哪里出错，改都没得改，很伤神，所以新站很容易被一些细节打败。本人经手的网站不少，对新站不被搜索引擎收录方面有些心得，就在这里跟大家分享下。
1、一般来说，在网站上线前我们都会书写robots.txt文件来屏蔽蜘蛛的抓取一些不该让搜索引擎抓取的东西，robots.txt文件对于搜索引擎来说就相当于一个地图，蜘蛛来爬取网站的时候，首先是先看看robots.txt文件的内容，根据内容来确定爬取的范围，对于网站来说相当重要，所以在书写robots.txt文件时一定要注意，如果蜘蛛错误理解了robots.txt文件的意思，可能就完全无视你得网站了。
2、网站内容质量要高，上线前我们都会每天固定的更新一些文章和发一些外链来通知搜索引擎我们网站要上线了，引起搜索引擎的注意，在上线后再更新一些文章和外链吸引搜索引擎来爬。当蜘蛛来爬取网站的时候，如果发现网站内容质量很低，没有什么营养，可能蜘蛛连个酱油都没打就回去了，更别提收录网站了。所以内容尽量要保持原创，切记不要发采集文章，至少也要伪原创，让蜘蛛有东西可带走。
本人在吸引蜘蛛有一些心得，在大型软文论坛，都有吸引蜘蛛的专门版块，在晚上11:00到00:30的时间内，发布原创软文，在上面添加自己网站的链接或者关键词链接来吸引蜘蛛观看，加快百度的收录，基本2天内google和百度都会收录，当然前提也是你网站内容质量好，否则蜘蛛吸引过来也没用。
3、网站布局要明确，不要有多余的代码，尤其是网站不要出现FLASH或者JS、css代码，搜索引擎蜘蛛不能识别FLASH中出现的文字，这些会引起搜索引擎的反感，所以尽量删除。网站模板自身也会带有一些没用的脚本和代码，也要一并删除，给搜索引擎留下很好的印象很重要。
4、网站标题要明确，3个标签要写好，标签里的关键词要控制好，不能让搜索引擎认为你有堆砌关键词的嫌疑。
5、网站URL地址要设置好，尽量都用静态地址，搜索引擎对静态地址比较有好感，全站使用静态页面,有利于搜索引擎蜘蛛对网站的爬行。而且URL中包含太多的变数可能会造成搜索引擎机器人搜索困难。如果URL包含变数太多，搜索引擎漫游器可能会忽视您的网页，对于这个问题一些比较熟悉网站建设的人可能会想到动态网页，的确就是这个问题，动态生成的网页(括ASP、PHP)可能导致抓取工具无法收录，解决办法就是使用静态页面或者伪静态。
6、上线前要把网站里的错误链接和死链接给清除掉，别在蜘蛛来网站时撞得头破血流，那收录就彻底没戏了。
7、服务器要稳定，不能出现时不时卡下或者网站突然打不开等现象，后果和错误链接、死链接是一样样的
8、最后就是向各大引擎提交网站地图，做好301跳转，做好404页面。