首先：防止flash。许多图像网站或是商品网站，需求用到flash的动画，动画发生的作用的确是能够进步用户体会，用户是能够读懂flash，可是关于蜘蛛来说是无法辨认的，蜘蛛只能抓取html里边的代码，关于flash里边的文字信息是无法抓取的，也无法出现给查找用户。若是网站的主页一开始即是设置的flash动画，那蜘蛛是根本无法持续抓取网站其他内容，若是关于一些网站是必须要flash的，那咱们只能在主页再设置指向html的连接，引导蜘蛛对其他内容进行抓取，不然网站就进入到蜘蛛的陷阱里边。能够近几年来蜘蛛在flash的抓取方面做了许多进步，可是对flash抓取仍然有障碍，站长们要想更持久的运营网站，仍是尽量的少用到flash。
　　其次：防止诈骗跳转。许多网站为了获取眼前的利益，给网站加上各种样式的跳转，能够是弹窗式的广告，能够是JS的跳转等，蜘蛛对这些跳转都是格外恶感的。若是你的网站跳转是为了进步用户的体会，这时能够不必考虑到蜘蛛的抓取，若是不是那最佳是不要采纳这样的跳转方法，对查找引擎来说是不友爱的，关于你的用户来说更是不友爱的。这样的做法往往会出现在资源下载站，或是一些废物的小说站点，用户点击去的都是其他站点的连接，或是诈骗的下载连接，这样会严峻的影响用户的体会。关于网站的跳转来说，蜘蛛仅有认可的即是网站的301跳转，用来改动网站的权重，其他的跳转站长们仍是要慎用的。
　　再次：防止frame布局。技术人员在规划网站时，会了能非常好的办理网站的布局，会用到frame的布局，尽管这样的布局布局有利于办理，可是和flash一样，蜘蛛抓取时只能辨认html的代码，其他的都是很难辨认的。关于frame布局不是说网站不行有，这些技术能够用到网站不想被蜘蛛辨认的地方，比方自个站点的一些广告连接，比方一些站群操作中的友链中，能够降低网站权重的流失，因为是自个的站点连接，他人也不会说你是不诚信的，可是这样的布局不要用到和外部的友情连接中，这种是很不诚信的，蜘蛛抓取不到，对他人来说也是很不好的，站长们要酌情考虑的去运用，别让网站进入陷进中。
　　最终：防止细节陷进。网站优化过程中需求注意的细节许多，这些细节中存在的陷进也是许多的，比方：图像的ALT属性，忘掉添加就会导致蜘蛛无法抓取；网站的动态URL地址，带有问号、等号、参数的动态连接，对蜘蛛的抓取是不友爱的；网站的JS跳转，许多时候会被用到导航上，可是蜘蛛的抓取就会发生一定的困难，何不必CSS替代；网站的内链布局，权重不高的站点，蜘蛛抓取的深度在3-4层，那这些网站就应该要树立网状的导航系统；还有即是网站一些作弊的手法，对网站来说这些作弊的手法都是陷进，是正规的网站想长期运营的网站，仍是不要运用作弊的手法，网站进入审阅期以后，就会很难出来，这是赔了夫人又折兵，得不偿失。
　　网站的规划要考虑到用户的体会，也要考虑到蜘蛛的抓取，不得不运用的一些规划，那就要想方法弥补，尽量能让蜘蛛能抓取到咱们的信息，尽量提供蜘蛛对网站的友爱程度，进步蜘蛛在网站的抓取次数，和抓取的数量，这样网站优化才会更友爱。