首页 > 代码库 > Java爬虫原理分析

Java爬虫原理分析

当我们需要从网络上获取资源的时候,我们一般的做法就是通过浏览器打开某个网站,然后将我们需要的东西下载或者保存下来。

但是,当我们需要大量下载的时候,这个时候通过人工一个个的去点击下载,就显得太没有效率了。这个时候我们就可以通过程序来实现批量的获取资源的方式,我们称之为爬虫。也就是从网络上的站点爬取资源的意思。

 

那么在java中要实现网络爬虫,就必须要使用到java中的java.net包中的一些类。

 

Java爬虫原理分析