搜索资源列表
htmlparser
- 很强大的工具，可以轻松抓取网页数据，配合HttpClient使用效果很好-Very powerful tool, you can easily grab web data, with good results using HttpClient
WebDataGet
- c#实现的多线程的抓取网页数据的工具。方便，高效，简单易用-c# multi-threaded implementation of a tool for data capture page. Convenient, efficient, easy to use
HeritrixSpd
- 本源码是用java编写的，运用hertrix工具实时抓取ku6动态网页的信息。希望更多的爬虫爱好者和我一起来学习。-The source code is written in Java hertrix tool, using real-time grasping he plays tennis dynamic web pages of information. Hope more crawler enthusiasts and I together to learn.
jsoup
- html解析工具，使用css子选择器的语法解析元素，比古老的HtmlParser好用很多。在最新版本中，不支持设置Cookie等头信息来访问url，这样一些需要设置Cookie的网页就无法抓取了。为方便使用，我稍微修改了源码。 -html analytical tools, the use of css selector parsing sub-elements, easy to use than many of the old HtmlParser. In the latest vers
MetaSeeker-4.11.2
- 主要应用领域： • 垂直搜索（Vertical Search）：也称为专业搜索，高速、海量和精确抓取是定题网络爬虫DataScraper的强项，每天24小时每周7天无人值守自主调度的周期性批量采集，加上断点续传和软件看门狗(Watch Dog)，确保您高枕无忧 • 移动互联网：手机搜索、手机混搭(mashup)、移动社交网络、移动电子商务都离不开结构化的数据内容，DataScraper实时高效地 采集内容，输出富含语义元数据的XML格式的抓取结果文件，确保自动化
WebInfoFiltingSolution
- 通过socket编程，对网络数据包的抓取，对协议的层层分析，实现对web网页上的垃圾信息进行过滤。-Through the socket programming, network packet capture, analysis of the layers of the protocol, to achieve the web pages of spam filtering.
WebCapture
- 网页照相机（滚动截屏抓取整个网页）VS2005C#源码-Web camera (scroll crawl the entire web page screenshot) VS2005C# Source
javaPspider
- 一个能够抓取互联网上网页标签的小项目-A tag can crawl on the Internet pages of small projects .....
python
- python写的网页爬虫，抓取制定网址所有图片收录本地-Web crawlers, crawl image
Chap01
- 网络爬虫抓取网页,使用httpclient抓取网页-Download html file with httpclient
tool_v2.0
- 1、JS加密/解密（将代码以js形式进行加密或解密。）2、UTF-8编码转换工具（UTF-8编码转换。）3、Unicode编码转换工具（Unicode编码转换。）4、友情链接（通过本工具可以批量查询指定网站的友情链接在百度的收录、百度快照、PR以及对方是否链接本站，可以识破骗链接。）5 、META信息检测（通过本工具可以快速检测网页的META标签，分析标题、关键词、描述等是否有利于搜索引擎收录。）6、MD5加密工具（对字符串进行MD5加密。）7 、身份证号码值查询（查询身份证所在地、性别及出生日
GetHTMLSource
- 利用DxHtmlParser单元 *网页代码捕捉 *链接抓取 例子是百度的-Use DxHtmlParser unit * Page code capture * Link to crawl Example is Baidu s
PictureDownloader-0.2
- 一个抓取网页图片的小程序，例如百度贴吧，功能有限，不过对一些图片丰富的论坛或者漫画贴吧还是可以的。-A small java software in order to download pictures from forum
WebVideoDownloader
- 抓取网页中含有的视频地址，能够多线程下载视频。-failed to translate
spider
- 一个简单的网络爬虫:抓取网页，将其存放在一个文件夹之下-A simple webCrawler
how-to-use-C-Sharp-to-grab-web-content
- 介绍如何用C#实现抓取网页内容。包括1、抓取一般内容。2 抓取网页内容－图片。3、抓取网页内容－Post 数据。4、抓取网页内容－防止重定向。5、抓取网页内容－保持登录状态。-Describes how to use C# to grab web content. Including crawl the general content. Crawl Web content- pictures. 3, spider web content-Post data. 4, crawling web co
Web-Crawlers
- 网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁，自动索引，模拟程序或者蠕虫。 -Web crawler (also known as web spider, robot, in the middle of the FOAF community, more often referred to as Web Chaser), is one kind of in acco
DemoURL
- 读取网页内容，抓取网站数据，通过网页或网站URL路径读取各种网页的源码和内容-Read the source and content of all pages to read web content to crawl the site data , web page or site URL path
C-Sharp-_-grab-web-content
- C#_抓取网页内容，对于初学者很有帮助。-C# _ grab web content, very helpful for beginners.
ExtractLinks
- 冲网页中抽取url的一个小工具，用于将抓取到的网页中的url提取出来-Red pages to extract the url of a small tool used to crawl pages in the url extracted