大家好，今天小编关注到一个比较有意思的话题，就是关于java实现网络爬虫的问题，于是小编就整理了2个相关介绍java实现网络爬虫的解答，让我们一起看看吧。
java怎么写爬虫？
爬虫都是基于现有的框架来开发的，基于java语言实现的爬虫框架很多，这里列举一个:WebMagic，它的架构设计参照了Scrapy，应用了HttpClient、Jsoup等Java成熟的工具，包含四个组件(Downloader、PageProcessor、Scheduler、Pipeline)，Spider是WebMagic内部流程的核心，上面的四个组件都相当于Spider的一个属性，通过设置这个属性可以实现不同的功能。
写爬虫和用Java写爬虫的区别是什么？
没得区别的，用Java写爬虫代码
public class DownMM {
public static void main(String[] args) throws Exception {
//out为输出的路径,注意要以\\结尾
String out = "D:\\JSP\\pic\\java\\";
try{
File f = new File(out);
if(! f.exists()) {
f.mkdirs();
}
到此，以上就是小编对于java实现网络爬虫的问题就介绍到这了，希望介绍关于java实现网络爬虫的2点解答对大家有用。
