迷你爬虫seo工具1.0 官方版

迷你爬虫是一款网站爬虫小工具，通过设定规则，可以直接爬取网页数据，可以批量导出网站关键字、标题、描述等内容！

迷你爬虫介绍

一款超级小巧快速的SEO工具，为seo行业的小伙伴们快速抓取自己网站关键字、标题、描述等内容提供简单、快速、有力的支持。通过分析抓取内容对网址进行改进。提高网站排名。

迷你爬虫特色

获取浏览器的输入历史，可以快速找到已经输入过的url.不需要再去记那一串长长的无意义的网址。

通过输入通配符的方式，快速输入一连串的网址，大大减少手动录入的效率。

如果自动生成的网址需要纠正，可以通过右键删除、修改的方式更正相应的网址。

默认提供标题、关键字、网页描述三项常用内容。供seo专业的同学可以快速上手，直接使用。迅速完成老板交待的内容。

通过自定义的XPath,可以任意设置你的抓取内容，而且可以设置无限的规则。

蜘蛛爬虫的原理和作用

网络蜘蛛即Web Spider，是一个很形象的名字。把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。

从网站某一个页面（通常是首页）开始，读取网页的内容，找到在网页中的其它链接地址，然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止。如果把整个互联网当成一个网站，那么网络蜘蛛就可以用这个原理把互联网上所有的网页都抓取下来。