搜索资源列表
spider(java)
- 网页抓取器又叫网络机器人(Robot)、网络爬行者、网络蜘蛛。网络机器人（Web Robot），也称网络蜘蛛(Spider)，漫游者（Wanderer）和爬虫（Crawler），是指某个能以人类无法达到的速度不断重复执行某项任务的自动程序。他们能自动漫游与Web站点，在Web上按某种策略自动进行远程数据的检索和获取，并产生本地索引，产生本地数据库，提供查询接口，共搜索引擎调用。-web crawling robots - known network (Robot), Web crawling,
websphinx-src
- 一个用java语言编写的网络爬虫程序，其中包含一个jar包，在装有jre的机器上可直接运行。-use a java language network Reptile procedures, which include a jar packs, jre installed in the machine can run.
cvu
- java html 解析小程序,文件包很小，适合网络爬虫程序使用，适合分析html页面
Test_Crawler
- 网络爬虫，主要根据种子网页来爬去其他的网页-test crawlar
multi-threaded
- 基于Java的多线程网络爬虫设计与实现，应用的是JAVA技术，制作网络爬虫-Java-based multi-threaded Web crawler design and implementation, the application is JAVA technology, production of web crawlers
ZhuaQu
- JAVA实现基本的页面抓取，运用多线程过滤和筛选，网络爬虫-JAVA Implementation of the basic page capture, filtering and screening of the use of multi-threaded Web crawler
java-spider
- java 爬虫，一个很简单的网络爬虫，能够从网页爬取内容-java spider
Spider-Java
- 网络爬虫的简要介绍及一点源代码，分享给想要学习爬虫的人-The web crawler brief introduction and point-source code
Java-Web-crawler-spider
- 网络爬虫蜘蛛Java源码,智能网罗信息，你懂的。-Java source web crawler spider, intelligent information gathering, you know.
java-Crawler
- 网络爬虫程序，可以爬取到网页上面的特定信息，有界面-Web crawler program, can climb to take specific information to the web page above interface
spaider
- 这是一个实现根据网络URL，能够上传与下载的网络爬虫java源代码，可以吧网络中文件下载到本地对应的文件夹中-This is achieved according to a network URL, the ability to upload and download web crawler java source code, you can now download the file to a local network, the corresponding folder
goodcrawler-master
- java爬虫程序，goodcrawler(web crawler) 网络爬虫-java goodcrawler
java
- 基于java的搜索引擎的设计与实现， “网络蜘蛛”或者说“网络爬虫”，是一种能访问网站并跟踪链接的程序，通过它，可快速地画出一个网站所包含的网页地图信息。本文主要讲述如何使用Java编程来构建一个“蜘蛛”-Design and implementation of java-based search engine, " spider" or " web crawler" , is able to visit the site and follow the
java-spide-crawl
- 使用java编写的网络爬虫代码，实现其基本功能，效果还不错-Web crawler using java to write code to achieve its basic functions, the results were good
java-crawler
- java爬虫 网络爬虫是一个自动提取网页的程序，它为搜索引擎从万维网上下载网页，是搜索引擎的重要组成-java crawler
spider
- 网络爬虫java源代码，可实现对新浪网的搜索。-spider.doc for sina
网络爬虫代码
- 该代码是用java语言写的，可以对指定的网站进行数据的爬取。
Arachnid_src0[1].40
- 网络爬虫为搜索引擎从万维网下载网页。一般分为传统爬虫和聚焦爬虫。 传统爬虫从一个或若干初始网页的URL开始，获得初始网页上的URL，在抓取网页的过程中，不断从当前页面上抽取新的URL放入队列，直到满足系统的一定停止条件。通俗的讲，也就是通过源码解析来获得想要的内容。 聚焦爬虫的工作流程较为复杂，需要根据一定的网页分析算法过滤与主题无关的链接，保留有用的链接并将其放入等待抓取的URL队列。然后，它将根据一定的搜索策略从队列中选择下一步要抓取的网页URL，并重复上述过程，直到达到系统的某一条件时
DownloadProxy
- webmagic框架实现网络爬虫，用java语言实现为爬虫添加代理(Using java language to add agents for reptiles)
HttpUtils
- java基于httpclient开发的网络爬虫通用实例，带登录后获取数据(Java based on httpclient development of a common example of web crawler, with login to obtain data)