在Java WebMagic中使用定時任務可以實現定時爬取網頁數據的功能。可以通過Java自帶的Timer類或者使用第三方的定時任務框架如Quartz來實現定時任務的調度。
下面是一個使用Timer類結合Java WebMagic實現定時任務的示例代碼：
import us.codecraft.webmagic.Spider;
import us.codecraft.webmagic.processor.example.GithubRepoPageProcessor;
import java.util.Timer;
import java.util.TimerTask;
public class WebMagicTimerTask {
public static void main(String[] args) {
Timer timer = new Timer();
timer.schedule(new TimerTask() {
@Override
public void run() {
Spider.create(new GithubRepoPageProcessor())
.addUrl("https://github.com/code4craft")
.thread(5)
.run();
}
}, 0, 1000 * 60 * 60); // 每小時執行一次
}
}
在上面的示例中，我們創建了一個定時任務Timer，并在其中定義了一個定時任務，使用WebMagic的Spider來爬取指定網頁的數據，然后設置定時任務每小時執行一次。
通過定時任務結合Java WebMagic，可以實現定時爬取網頁數據的功能，實現自動化數據采集和更新。
