搜搜引擎蜘蛛是一个自动抓取互联网上网页内容的程序，每个搜索引擎都有自己的蜘蛛。
搜索引擎蜘蛛也叫搜索引擎爬虫、搜索引擎robot。
国内各大搜索引擎蜘蛛名称：
百度：百度spider
谷歌：googlebot
搜狗：sogou spider
搜搜：Sosospider
360搜索：360Spider
有道：YodaoBot
雅虎：Yahoo Slurp
必应：msnbot
Msn:msnbot
以上是常见的搜索引擎蜘蛛（爬虫），如果你的网站不想让让某些蜘蛛抓取，那么可以通过robots.txt来限制爬虫的抓取。
主题测试文章，只做测试使用。发布者：王海海，转转请注明出处：https://www.wanghaihai.com/seo/54.html
今天在论坛里闲逛看到一个朋友有这样的疑问： “文章里有做了站内锚文本互链的，比如：在一篇文章里提到了长尾关键词要怎么优化，然后给它打上链接，指向那篇正在描述长尾关键词怎么优化的文章，百度不会也把它当做是这次软性广告垃圾页面的范畴吧？” 我们都知道绿萝算法是打击垃圾链接的，那么绿萝算法2.0更是绿萝的升级版，将会打击软文链接。那么到底会不会打击内链呢？ 内链建…
网站优化工作最开始的工作就是挑选关键词，有一个好的关键词做开头，网站优化才能更加的顺利。而很多惬意在挑选关键词的时候并不精准，导致网站的后期优化一直有心无力。那么如何成功的为网站挑选关键词，让关键词为网站优化带来助力。为网站做定位在挑选关键词之前首先要做的就是网站的定位。自己的网站是在哪一个行业中的，自己的网站会销售什么产品，自己网站会提供哪些服务，自己的网…
在我们的认识里，做国内产品的一般依赖百度，做外贸的则依赖谷歌。曾看过一篇“谷歌工程师：我自己做seo也未必能做好”，作为全球最大的搜索引擎的工程师也这么说，换位思考则百度内部的工程师也如此，再用小范围的比喻，那些做seo培训的能做好seo，这个也是不一定的！ 最近的一次算法更新，是谷歌引擎的6月21日的更新，更新范围较大，很多做外贸的朋友的站都被K了 ，再加…
很多SEOER都会有这样的一个疑问：如何增加网站收录？为什么我的网站收录就是上不去？那到底是什么让网站的收录一落千丈呢？ 内容是否符合蜘蛛的胃口？ 你确定你的内容符合蜘蛛的胃口吗？能肯定吗？既然符合了它为什么不过来？还是那些老话，原创、相关性、更新频率 外链是否传权？是否引导蜘蛛？ 外链建设了，是否建设在垃圾站点？是否被当做SPAM处理了？难道你所有的外链全…
