HTML的解析器，是Majestic-12分布式搜索引擎的一部分。作者Alex Chudnovsky, Majestic-12 Ltd (UK)。这个是3.0版本，性能经过多次优化，文档也比较全。也可以到http://www.majestic12.co.uk下载。-HTML parser, Majestic-12 distributed search engine part. Author Alex Chudnovsky, Majestic-12 Ltd (UK). This is versio

可配置：线程数、线程等待时间，连接超时时间，可爬取文件类型和优先级、下载目录等。 状态栏显示统计信息：排入队列URL数，已下载文件数，已下载总字节数，CPU使用率和可用内存等。 有偏好的爬虫：可针对爬取的资源类型设置不同的优先级。 健壮性：十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用等、多种策略以解析相对路径等。 较好的性能：基于正则表达式的页面解析、适度加锁、维持HTTP连接等。 -C# spider.

网络爬虫, * 可配置：线程数、线程等待时间，连接超时时间，可爬取文件类型和优先级、下载目录等。 * 状态栏显示统计信息：排入队列URL数，已下载文件数，已下载总字节数，CPU使用率和可用内存等。 * 有偏好的爬虫：可针对爬取的资源类型设置不同的优先级。 * 健壮性：十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用等、多种策略以解析相对路径等。 * 较好的性能：基于正则表达式的页面解析、适度加锁、维持HTTP连接等。-Web crawler

　　为什么选择黑帽seo培训 　　黑帽seo培训是学习黑帽seo最快的方式，因为别人花了几年时间研究出来的黑帽seo优化技术，如果进行黑帽seo系统培训，你可能用几个星期就学会了，黑帽seo培训大大节省了学习黑帽seo所耗费的时间，而且因为有人指导，可以少走很多弯路，加上自己后期的黑帽seo实战经验，可以快速的融入黑帽seo行业。大幅提高自身的黑帽seo技术水平。 　　【黑帽学习网www.heimaoxuexi.com】黑帽seo技术从入门到实战教程，零基础学习无负担！最新的黑帽SEO代