网页的URL必须是可以被抓取的，如果网页是由数据库动态生成的，那么URL一般要经过改写成静态的，也就是去掉那些URL中问号参数之类的东西， 也要去掉Session ID。技术上倒不是搜索引擎不能读取这种URL，但是为了避免陷入无限循环，搜索引擎蜘蛛通常要远离这类URL。

还有如果你的网站是一个整个的flash，那也没办法读取。虽然搜索引擎在努力想读取flash信息，但目前为止收效甚微。

还有框架结构(frame)，在网站刚出现的时候，框架结构风行一时，现在还有不少网站在用，这是搜索引擎蜘蛛的大敌。有的时候可以抓取，但别自找麻烦。

还有尽量去除不必要的搜索引擎不能读的东西，像音频文件，图片，弹出窗口等。

呼和浩特网络公司-呼和浩特网站制作-呼和和浩特网站建设-内蒙古网站制作公司-内蒙古网络公司http://www.1000tou.com