JAVA写一个爬虫代码
时间: 2024-06-10 13:05:09 浏览: 105
好的,以下是一个简单的Java爬虫代码示例:
```java
import java.io.IOException;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
public class SpiderExample {
public static void main(String[] args) {
String url = "https://www.example.com"; // 要抓取的网页地址
try {
Document document = Jsoup.connect(url).get(); // 用Jsoup连接网页并获取网页的DOM结构
Element element = document.getElementById("content"); // 获取ID为content的元素
System.out.println(element.text()); // 打印元素的文本内容
} catch (IOException e) {
e.printStackTrace();
}
}
}
```
这个爬虫代码使用了Jsoup库,通过连接网页并获取DOM结构,再根据元素ID获取相应元素的文本内容,从而实现简单的爬虫功能。当然,这只是一个简单的示例,实际爬虫还需要考虑到反爬机制、数据存储等问题。
阅读全文